鱼C论坛

 找回密码
 立即注册
查看: 39954|回复: 312

[作品展示] 新手写了一个妹子图爬虫!(多进程)

  [复制链接]
发表于 2020-5-3 00:21:51 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 97766819 于 2020-5-3 17:33 编辑

友情提示:

每次最好爬取2页或者3页或者4页 不要超过4页最好 可以为4页

因为我写的都是基于多进程 爬取的速度要看你的CPU的

CPU很好的话可以当我说屁话! =  =

可以4页4页的爬取 我一次性爬取了12页 到后面来的时候会出现很慢 我打开图片url时候发现有些url访问出来的速度确实会有点慢

可能比较吃网速 我家网不太好 所以你们电脑配置好的 可以爬取网页多点

使用需知:
不要过分爬取网站的图片
出现法律责任与我无关!
一切责任由使用者承担!

爬取的网站:https://www.nvshens.net/gallery/

图片如下:
2.jpg
14.jpg
32.jpg

源码如下:
游客,如果您要查看本帖隐藏内容请回复


评分

参与人数 2荣誉 +6 鱼币 +1 收起 理由
xiangjianshinan + 1 + 1 鱼C有你更精彩^_^
奶绿去冰大杯 + 5

查看全部评分

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-3 08:27:49 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-5-3 09:31:36 | 显示全部楼层

我还以为没人会回复  = = 测试的咋样啊!
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-5-3 17:40:47 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-3 19:40:44 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-3 20:50:40 | 显示全部楼层
6666
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-3 21:21:24 | 显示全部楼层
66666666666
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

头像被屏蔽
发表于 2020-5-4 09:08:03 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-4 10:01:14 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-4 10:23:14 | 显示全部楼层
666
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-4 10:45:40 | 显示全部楼层
本着学习的态度,来学习一下,没有别的目的,我是一个正直的人,恩恩,别的啥也不说了,我去弄了,哈哈
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-4 12:27:31 | 显示全部楼层
666
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-4 12:35:41 | 显示全部楼层
。。。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-4 15:50:31 | 显示全部楼层
试试效果咋样
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-4 19:11:02 | 显示全部楼层
啧啧
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-4 21:23:52 | 显示全部楼层
哈哈哈
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-5 23:37:54 | 显示全部楼层
学习一下
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-6 00:00:09 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-6 08:55:10 | 显示全部楼层
只是学习a,早上起来看有点恶心
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-6 09:45:09 | 显示全部楼层
感谢分享
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-12-22 13:00

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表