0223最新爬取煎蛋网图片（多线程版）

2434849827 · 发表于 2020-2-23 17:08:05

您需要登录才可以下载或查看，没有账号？立即注册

x

本帖最后由 2434849827 于 2020-2-27 12:18 编辑

最近觉得爬虫速度太慢了，于是学习了多线程，加快了速度，提高了效率，可以干更多的事了。

游客，如果您要查看本帖隐藏内容请回复

2434849827 · 发表于 2020-2-23 18:55:53

本帖最后由 2434849827 于 2020-2-27 12:20 编辑

看见大家都有这么高的学习热情，今天改动了一下程序，在爬取的时候加了一个代理ip，避免长时间同一个ip访问导致程序无法正常运行。
QQ截图20200227120035.png

游客，如果您要查看本帖隐藏内容请回复

ip.txt (5.66 KB, 下载次数: 63)
注意：这个代理ip是我0226号爬取分析出来的，要跟爬虫文件放在同一个目录下使用。

jutly · 发表于 2020-2-23 20:30:38

360134518 · 发表于 2020-2-23 20:59:46

容斋五笔 · 发表于 2020-2-23 21:21:45

咋弄的？看看

suiyuanliuyue · 发表于 2020-2-23 22:23:55

前来学习

jimy_li · 发表于 2020-2-24 20:35:56

一定有好东西在后头。

sankn · 发表于 2020-2-24 21:02:58

best028ajun · 发表于 2020-2-24 21:41:58

学习了，原来还能这样！

whosyourdaddy · 发表于 2020-2-24 21:47:31

支持

1726921743 · 发表于 2020-2-24 22:46:05

Cohee · 发表于 2020-2-24 23:17:55

666666

my蛋糕 · 发表于 2020-2-25 09:18:38

哈哈哈

NO.497 · 发表于 2020-2-25 10:40:32

科学技术才是第一生产力！

zero_sunshine · 发表于 2020-2-25 10:54:42

绅士们，开始吧

xillnote · 发表于 2020-2-25 11:09:53

至从加入鱼C 身体那是一天不如一天啊

一个账号 · 发表于 2020-2-25 12:01:46

长不胖eric · 发表于 2020-2-25 12:05:28

科技是第一生产力

hao5566 · 发表于 2020-2-25 13:33:23

比较好奇

橙子鈞 · 发表于 2020-2-25 13:57:30

账号		自动登录	找回密码
密码			立即注册

[作品展示] 0223最新爬取煎蛋网图片（多线程版）