小说爬虫分享

chenguwen003210 · 发表于 2017-12-22 14:08:23

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

本帖最后由 chenguwen003210 于 2017-12-22 14:24 编辑

不知道大家看小说有没有如此困扰，现在大多市面上的阅读小说的软件广告很烦人，时不时就弹出广告来，好的阅读软件看小说又要钱，当然我们要支持正版，本着学习的态度(实在受不了弹出的广告了)，写了个小说爬虫，功能有点简单该软件爬的是 UU书屋
使用方法把书目的网页地址复制进config里覆盖类似：https://www.uukanshu.com/b/26511/
记得加https
然后双击novel.exe
等待即可由于该网站可能设置有反爬虫机制所以我在爬每一章节的时候设置有间隔时间 0.001s
最初是单线程的，后来改为多核多线程。

运行程序
地址：

游客，如果您要查看本帖隐藏内容请回复

源码：

游客，如果您要查看本帖隐藏内容请回复

tailor_long · 发表于 2017-12-22 14:53:08

官方认证，标准沙发

及格再改名 · 发表于 2017-12-22 16:09:59

来钓鱼 · 发表于 2017-12-22 22:48:48

Sert_My · 发表于 2017-12-23 17:59:55

加油努力，芝麻开门

socolone · 发表于 2017-12-23 18:56:59

前来学习请教，python新人

payton24 · 发表于 2017-12-24 18:43:04

不错不错

小小白2017 · 发表于 2017-12-25 11:46:19

学习

一天N小时 · 发表于 2017-12-25 12:55:05

前来观摩，新人。

杜鹏刚 · 发表于 2017-12-25 16:26:20

刚入门，学习阶段

微笑糖 · 发表于 2017-12-25 20:11:57

HenryMorgan · 发表于 2017-12-25 20:24:05

yith333 · 发表于 2017-12-25 21:49:13

学习了

kun5815 · 发表于 2017-12-25 22:32:29

最初是单线程的，后来改为多核多线程

ba460 · 发表于 2017-12-26 09:22:15

哇，JS写的爬虫，还不会玩

bhbbhbbhb · 发表于 2017-12-26 11:01:47

THANK YOU VERY MUCH

wiwi · 发表于 2017-12-26 15:41:25

我是来学习的

nalli · 发表于 2017-12-26 16:17:42

weiguan

omart · 发表于 2017-12-26 16:48:41

看看。

亚历山大.秋 · 发表于 2017-12-26 17:13:52

账号		自动登录	找回密码
密码			立即注册

[原创] 小说爬虫分享

马上注册，结交更多好友，享用更多功能^_^