某个限制观看次数的网盘，爬虫怎么突破？

ufo20085 · 发表于 2018-5-3 03:45:15

您需要登录才可以下载或查看，没有账号？立即注册

x

正在写一个爬虫程序，爬某个羞羞的网站，游客一天只能看10个页面的视频。爬虫程序爬取超过10次以后，requests.get到的网页源码里就没有视频的真实地址了。
原来以为是IP限制，然后requests.get切换了代理ip,仍然无法爬取到地址。
这样的应该要怎么处理呀，大神给点思路。

风扫地 · 发表于 2018-5-3 09:06:02

可能在本地存了cookies。

ufo20085 · 发表于 2018-5-3 10:01:56

风扫地发表于 2018-5-3 09:06
可能在本地存了cookies。

那这种要怎么绕过cookies验证呢？

Der_kokon · 发表于 2018-5-3 10:15:33

ufo20085 发表于 2018-5-3 10:01
那这种要怎么绕过cookies验证呢？

上会员a哈哈哈哈

膜法记者 · 发表于 2018-5-3 12:48:16

把cookie清理掉

账号		自动登录	找回密码
密码			立即注册