braga 发表于 2020-5-25 11:06:27

关于爬虫中cookie的问题

最近试着爬一些网站      总是遇到检查cookie才能请求到正确的页面

1.比如 我在某一页面上修改 在network找到这个请求的url data但是总是检查上一页面的set的 cookie，有的还是一些js 设置的cookie，有的还是好几个cookie
是不是我的方法搞错了？
2. 使用session存储的cookie在下一次set cookie的时候 原来存储的就清空了， 有没有啥好办法能使多个cookieJar 合并 扩展呀

3. scrapy 中怎么方便的在中间件中多次设置cookie啊

谢谢大佬们{:5_111:}

沐羽尘 发表于 2020-5-25 14:59:09

插个眼，这个问题我现在也还没学到{:10_250:}

braga 发表于 2020-5-25 18:38:36

求助啊大佬们{:5_111:}

braga 发表于 2020-5-26 10:56:47

{:5_111:}
页: [1]
查看完整版本: 关于爬虫中cookie的问题