鱼C论坛

 找回密码
 立即注册
查看: 1382|回复: 166

[作品展示] Python爬取斗破苍穹漫画

  [复制链接]
最佳答案
403 
发表于 2018-10-7 02:01:21 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
朋友要我下载这个漫画,从那时开始写这个代码,到现在才完成,什么时候开始的我好像已经忘记了^_^
贴出来分享一下,希望能得到好的建议和意见

爬取705话,花了两个多小时
代码可能还可以改进一下,提高速度,不过我没有思路了
代码几乎没有注释,这个代码是通过动态调试出来的,感觉就算是写了注释也没有意义^_^
如果哪里看不懂就问我

1.png
2.png


源码隐藏一下吧^_^
游客,如果您要查看本帖隐藏内容请回复


评分

参与人数 1荣誉 +1 贡献 +1 收起 理由
云间鱼 + 1 + 1

查看全部评分

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-7 08:05:17 | 显示全部楼层
谢谢大大的分享
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
1 
发表于 2018-10-7 08:08:56 | 显示全部楼层
666
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-7 09:36:48 | 显示全部楼层
观摩一下
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-7 10:25:32 | 显示全部楼层
感兴趣
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-8 15:19:09 | 显示全部楼层
观摩一下
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-8 15:47:44 | 显示全部楼层
感谢楼主分享
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-8 16:03:14 | 显示全部楼层
大佬
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 08:32:34 | 显示全部楼层
jiaypu
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 08:35:02 From FishC Mobile | 显示全部楼层
学习
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 09:26:03 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 09:28:08 | 显示全部楼层
试一下
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 11:34:41 | 显示全部楼层
大神我想学习下,谢谢
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 12:26:07 | 显示全部楼层
谢谢大大的分享
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 13:00:12 | 显示全部楼层
漫画可以共享一下么
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
403 
 楼主| 发表于 2018-10-9 13:19:39 | 显示全部楼层
tremble 发表于 2018-10-9 13:00
漫画可以共享一下么

自己把这个代码运行两个小时就有了
^_^
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
1 
发表于 2018-10-9 13:19:44 | 显示全部楼层
6666
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 13:22:55 | 显示全部楼层
人造人 发表于 2018-10-9 13:19
自己把这个代码运行两个小时就有了
^_^

简单看了一下代码,有点不规范,但是还是可以拿来直接跑的,用了很多东西,但是结构有点混乱。
爬虫太慢了,可以加上线程池啥的,把下载的部分全都都丢到线程池里能加快很多。
还发现了,只要传入的url是这个网站的任意一部漫画的链接,只要不是VIP试读限制的,都可以跑。
整理一下还是很不错的。
可以亵玩焉
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
403 
 楼主| 发表于 2018-10-9 13:25:45 | 显示全部楼层
tremble 发表于 2018-10-9 13:22
简单看了一下代码,有点不规范,但是还是可以拿来直接跑的,用了很多东西,但是结构有点混乱。
爬虫太慢 ...

线程池
感谢提出的建议,我有时间了研究研究
^_^
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2018-10-9 13:57:02 | 显示全部楼层
谢谢分享
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

小甲鱼强烈推荐上一条 /1 下一条

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号

GMT+8, 2018-10-21 14:23

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表