兢兢
发表于 2020-3-13 17:08:38
笔趣阁爬取小说
本帖最后由 兢兢 于 2021-9-21 04:20 编辑
生成txt文件,导入书架能自动生成目录
使用requests,BeautifulSoup模块,18句代码爬取笔趣阁小说,屡试不爽
爬取思路:
1、打开小说目录
2、提取目录列表中所有章节超链接
3、打开章节链接
4、提取章节内容
5、写入记事本
6、重复3-5过程
**** Hidden Message *****
下面多线程下载,速度就是快……
多线程会出现章顺序混乱情况,通过列表排序解决此问题。
**** Hidden Message *****
2547978337
发表于 2020-3-13 17:22:02
很好,小白前来学习
罗巴乔
发表于 2020-3-13 17:24:11
学习学习看
heiheill
发表于 2020-3-14 15:26:16
{:10_277:}
liangjie263
发表于 2020-3-16 20:48:17
嘿,这事我正打算干{:5_110:}
三家分晋
发表于 2020-3-16 22:21:35
嗡嗡嗡
gz_haiyeh
发表于 2020-3-17 09:35:09
{:5_109:}
Ayluc
发表于 2020-3-17 11:53:17
xuexi
无畏demo
发表于 2020-3-17 13:26:54
想看想看{:7_129:}
python_xiaojie
发表于 2020-3-19 12:25:36
1
itman12
发表于 2020-3-19 15:00:05
{:5_109:}
hali639
发表于 2020-3-19 15:39:53
这个可以哦!
1525225435
发表于 2020-3-19 16:13:13
小白学习
TomsShelby
发表于 2020-3-19 17:28:17
看看
空白zz
发表于 2020-3-24 08:59:30
看看{:10_256:}
DAWDDWADWA
发表于 2020-3-24 09:12:42
学习
luohoney
发表于 2020-3-24 10:06:22
小白前来学习
loveQQW
发表于 2020-3-30 22:41:57
1
shuan123
发表于 2020-3-30 23:12:06
学习学习看
疾风怪盗
发表于 2020-3-31 11:45:38
小白学习一下