鱼C论坛

 找回密码
 立即注册
楼主: Reed

[作品展示] 爬虫IP被封的对策,讨论一下。附爬虫源码。

[复制链接]
回帖奖励 40 鱼币 回复本帖可获得 5 鱼币奖励! 每人限 1 次(中奖概率 50%)
发表于 2015-10-25 17:44:19 | 显示全部楼层
Reed 发表于 2015-10-25 14:34
没有爬虫,百度和谷歌的搜索引擎就可以歇了

只能说这个对于搜索引擎有用,但是对于我们有啥用,我们又不做搜索引擎
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-26 00:33:35 | 显示全部楼层
目前还看不太懂,看看高手们讨论吧
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-26 10:53:53 | 显示全部楼层

回帖奖励 +5 鱼币


正是我想学习的内容
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-26 14:58:00 | 显示全部楼层

回帖奖励 +5 鱼币

学习学习
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-26 17:08:04 | 显示全部楼层

回帖奖励 +5 鱼币

budong,bangding/////////
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-26 17:51:23 | 显示全部楼层
kk
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2015-10-26 21:31:42 | 显示全部楼层
同问
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2015-10-27 16:27:25 | 显示全部楼层
f布式爬虫
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-10-28 09:34:23 | 显示全部楼层
John_farmer 发表于 2015-10-25 17:44
只能说这个对于搜索引擎有用,但是对于我们有啥用,我们又不做搜索引擎

对哈,也是~!  确实~!
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-29 15:44:00 | 显示全部楼层
没看懂
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-30 13:19:23 | 显示全部楼层
非常好学习了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-31 21:53:02 | 显示全部楼层
先马 以后来看看
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-10-31 22:51:29 | 显示全部楼层
好高级的样子。。。。。。。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-11-14 21:27:44 | 显示全部楼层

回帖奖励 +5 鱼币

403 Forbidden啊:mad:
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-11-16 14:33:31 | 显示全部楼层

添加一下Header{'User-Agent': 'Mozilla/5.0'}   好像是这么写的,你找找你的浏览器里面的 贴上就行
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-12-26 09:49:11 | 显示全部楼层
鱼币奖励有概率
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2015-12-27 17:22:53 | 显示全部楼层

回帖奖励 +5 鱼币

神人也
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

头像被屏蔽
发表于 2018-7-26 13:39:17 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-11-17 16:48:24 | 显示全部楼层

回帖奖励 +5 鱼币

厉害啊,我先学习学习
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-11-18 19:51:44 | 显示全部楼层

回帖奖励 +5 鱼币

学习一下~~~
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-12-22 23:21

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表