关于爬虫中cookie的问题

braga · 发表于 2020-5-25 11:06:27

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

最近试着爬一些网站    总是遇到检查cookie才能请求到正确的页面

1.比如我在某一页面上修改在network找到这个请求的url data  但是总是检查上一页面的set的 cookie，有的还是一些js 设置的cookie，有的还是好几个cookie
是不是我的方法搞错了？
2. 使用session  存储的cookie  在下一次set cookie的时候原来存储的就清空了，有没有啥好办法能使多个cookieJar 合并扩展呀

3. scrapy 中怎么方便的在中间件中多次设置cookie啊

谢谢大佬们

沐羽尘 · 发表于 2020-5-25 14:59:09

插个眼，这个问题我现在也还没学到

braga · 发表于 2020-5-25 18:38:36

求助啊大佬们

braga · 发表于 2020-5-26 10:56:47

账号		自动登录	找回密码
密码			立即注册