2434849827
发表于 2020-2-23 17:08:05
0223最新爬取煎蛋网图片（多线程版）
本帖最后由 2434849827 于 2020-2-27 12:18 编辑
最近觉得爬虫速度太慢了，于是学习了多线程，加快了速度，提高了效率，可以干更多的事了。
**** Hidden Message *****
2434849827
发表于 2020-2-23 18:55:53
0223最新爬取煎蛋网图片（多线程+代理ip版）
本帖最后由 2434849827 于 2020-2-27 12:20 编辑
看见大家都有这么高的学习热情，今天改动了一下程序，在爬取的时候加了一个代理ip，避免长时间同一个ip访问导致程序无法正常运行。
**** Hidden Message *****
注意：这个代理ip是我0226号爬取分析出来的，要跟爬虫文件放在同一个目录下使用。
jutly
发表于 2020-2-23 20:30:38
6
360134518
发表于 2020-2-23 20:59:46
{:10_297:}
容斋五笔
发表于 2020-2-23 21:21:45
咋弄的？看看
suiyuanliuyue
发表于 2020-2-23 22:23:55
前来学习
jimy_li
发表于 2020-2-24 20:35:56
一定有好东西在后头。
sankn
发表于 2020-2-24 21:02:58
{:5_91:}
best028ajun
发表于 2020-2-24 21:41:58
学习了，原来还能这样！
whosyourdaddy
发表于 2020-2-24 21:47:31
支持
1726921743
发表于 2020-2-24 22:46:05
11
Cohee
发表于 2020-2-24 23:17:55
{:10_277:}666666
my蛋糕
发表于 2020-2-25 09:18:38
哈哈哈
NO.497
发表于 2020-2-25 10:40:32
科学技术才是第一生产力！
zero_sunshine
发表于 2020-2-25 10:54:42
绅士们，开始吧
xillnote
发表于 2020-2-25 11:09:53
至从加入鱼C 身体那是一天不如一天啊
一个账号
发表于 2020-2-25 12:01:46
{:9_241:}
长不胖eric
发表于 2020-2-25 12:05:28
科技是第一生产力{:10_277:}
hao5566
发表于 2020-2-25 13:33:23
比较好奇
橙子鈞
发表于 2020-2-25 13:57:30
66
页:
[1]
2
3
4
5
6
7
8
9
10