笔趣阁爬取小说

兢兢 · 发表于 2020-3-13 17:08:38

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

本帖最后由兢兢于 2021-9-21 04:20 编辑

生成txt文件，导入书架能自动生成目录
使用requests,BeautifulSoup模块，18句代码爬取笔趣阁小说,屡试不爽
爬取思路:
1、打开小说目录
2、提取目录列表中所有章节超链接
3、打开章节链接
4、提取章节内容
5、写入记事本
6、重复3－5过程

游客，如果您要查看本帖隐藏内容请回复

下面多线程下载,速度就是快……
多线程会出现章顺序混乱情况，通过列表排序解决此问题。

游客，如果您要查看本帖隐藏内容请回复

2547978337 · 发表于 2020-3-13 17:22:02

很好，小白前来学习

罗巴乔 · 发表于 2020-3-13 17:24:11

学习学习看

heiheill · 发表于 2020-3-14 15:26:16

liangjie263 · 发表于 2020-3-16 20:48:17

嘿，这事我正打算干

三家分晋 · 发表于 2020-3-16 22:21:35

嗡嗡嗡

gz_haiyeh · 发表于 2020-3-17 09:35:09

Ayluc · 发表于 2020-3-17 11:53:17

xuexi

无畏demo · 发表于 2020-3-17 13:26:54

想看想看

python_xiaojie · 发表于 2020-3-19 12:25:36

itman12 · 发表于 2020-3-19 15:00:05

hali639 · 发表于 2020-3-19 15:39:53

这个可以哦！

1525225435 · 发表于 2020-3-19 16:13:13

小白学习

TomsShelby · 发表于 2020-3-19 17:28:17

看看

空白zz · 发表于 2020-3-24 08:59:30

看看

DAWDDWADWA · 发表于 2020-3-24 09:12:42

学习

luohoney · 发表于 2020-3-24 10:06:22

小白前来学习

loveQQW · 发表于 2020-3-30 22:41:57

shuan123 · 发表于 2020-3-30 23:12:06

学习学习看

疾风怪盗 · 发表于 2020-3-31 11:45:38

小白学习一下

账号		自动登录	找回密码
密码			立即注册

[技术交流] 笔趣阁爬取小说

马上注册，结交更多好友，享用更多功能^_^