鱼C论坛

 找回密码
 立即注册
查看: 1371|回复: 10

[已解决]爬虫访问被禁如何解决

[复制链接]
发表于 2018-3-6 01:11:37 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x


之前还可以正常返回结果,但今天返回了以下错误,这是IP拉黑了的意思吗?各位鱼油碰到这种情况是如何去解决的呢?




最佳答案
2018-3-6 12:48:21
Holiday123 发表于 2018-3-6 12:29
像我这种现在已经被拉黑了的,还能用cookie的方法来实现吗还是只能用代理了?


你用浏览器无痕模式访问试试/或者登录账号看看能不能访问,可以的话加个cookie就行。。。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2018-3-6 01:12:50 | 显示全部楼层
捕获1.JPG 捕获.JPG
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-3-6 01:17:51 | 显示全部楼层
用代理
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-3-6 01:24:59 | 显示全部楼层

具体你一般怎么操作呢?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-3-6 09:46:43 | 显示全部楼层
1.设置时间间隔
2.设置用户池
3.设置代理池
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-3-6 10:43:46 From FishC Mobile | 显示全部楼层
requests请求加上cookie值,
用代理的话,最好是买代理,不然的话,免费代理,我就不多吐槽了。。。
平民化的操作就是无痕浏览器的cookie多拿几个,每页用不同的cookie,时间间隔随机化这些。。。
https://mp.weixin.qq.com/s/xlw3mlrG01cLeZmpnOlfww
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-3-6 12:27:21 | 显示全部楼层
Charles未晞 发表于 2018-3-6 10:43
requests请求加上cookie值,
用代理的话,最好是买代理,不然的话,免费代理,我就不多吐槽了。。。
平民 ...

关注你写的公众号了,很棒哈~
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-3-6 12:29:03 | 显示全部楼层
Charles未晞 发表于 2018-3-6 10:43
requests请求加上cookie值,
用代理的话,最好是买代理,不然的话,免费代理,我就不多吐槽了。。。
平民 ...

像我这种现在已经被拉黑了的,还能用cookie的方法来实现吗还是只能用代理了?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-3-6 12:30:01 | 显示全部楼层
°蓝鲤歌蓝 发表于 2018-3-6 09:46
1.设置时间间隔
2.设置用户池
3.设置代理池

已经被封了的,你一般采取哪种呢?还是你说的上述三种都还可以解决的呢?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-3-6 12:34:13 | 显示全部楼层
Holiday123 发表于 2018-3-6 12:30
已经被封了的,你一般采取哪种呢?还是你说的上述三种都还可以解决的呢?

3吧
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-3-6 12:48:21 | 显示全部楼层    本楼为最佳答案   
Holiday123 发表于 2018-3-6 12:29
像我这种现在已经被拉黑了的,还能用cookie的方法来实现吗还是只能用代理了?


你用浏览器无痕模式访问试试/或者登录账号看看能不能访问,可以的话加个cookie就行。。。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-5-19 07:17

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表