鱼C论坛

 找回密码
 立即注册
查看: 18084|回复: 141

[原创] 小说爬虫分享

  [复制链接]
发表于 2017-12-22 14:08:23 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 chenguwen003210 于 2017-12-22 14:24 编辑

不知道大家看小说有没有如此困扰,现在大多市面上的阅读小说的软件广告很烦人,时不时就弹出广告来,好的阅读软件 看小说又要钱 ,当然我们要支持正版,本着学习的态度(实在受不了弹出的广告了),写了个小说爬虫,功能有点简单 该软件爬的是 UU书屋
使用方法 把书目的网页地址 复制进config里覆盖 类似:https://www.uukanshu.com/b/26511/
记得加https
然后双击novel.exe
等待即可 由于该网站可能设置有反爬虫机制 所以我在爬每一章节的时候设置有间隔时间 0.001s
最初是单线程的,后来改为多核多线程。

运行程序
地址:
游客,如果您要查看本帖隐藏内容请回复

源码:
游客,如果您要查看本帖隐藏内容请回复
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-22 14:53:08 | 显示全部楼层
官方认证,标准沙发
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-22 16:09:59 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-22 22:48:48 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-23 17:59:55 | 显示全部楼层
加油努力,芝麻开门
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-23 18:56:59 | 显示全部楼层
前来学习请教,python新人
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-24 18:43:04 | 显示全部楼层
不错不错
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-25 11:46:19 | 显示全部楼层
学习
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-25 12:55:05 | 显示全部楼层
前来观摩,新人。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-25 16:26:20 | 显示全部楼层
刚入门,学习阶段
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-25 20:11:57 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-25 20:24:05 | 显示全部楼层
0
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-25 21:49:13 | 显示全部楼层
学习了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-25 22:32:29 | 显示全部楼层
最初是单线程的,后来改为多核多线程
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-26 09:22:15 | 显示全部楼层
哇,JS写的爬虫,还不会玩
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-26 11:01:47 | 显示全部楼层
THANK YOU VERY MUCH
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-26 15:41:25 | 显示全部楼层
我是来学习的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-26 16:17:42 | 显示全部楼层
weiguan
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-12-26 16:48:41 | 显示全部楼层
看看。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-12-26 17:13:52 | 显示全部楼层
1
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-12-21 22:21

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表