方便远程吗?
谢谢,我好像找到原因了,应该是cookies的原因。
我一直用的是登录页面返回的cookies。
刚刚看到有同学提到cookies。
我就把浏览器上这个页面里的cookies复制到程序里,就成功了。。。。
我再抓取一下两种cookies比较一下。 我看了一下你的回答 我不知道我的理解对不对浏览器显示所有数据 但是爬虫却要分页1.可能有请求头反爬 2.有登录验证 (如没有登录就显示14条 登录就显示全部数据 )
也可以看看是不是AJAX加载 admintest166 发表于 2020-8-22 22:58
我看了一下你的回答 我不知道我的理解对不对浏览器显示所有数据 但是爬虫却要分页1.可能有请求头反爬 2 ...
后来找到原因了,类似于第二条吧,在post账号和密码之后,还有一个post,只post账号就行,就是还不知道当时网站这么设计的逻辑是什么,,, getfeel 发表于 2020-9-20 21:09
后来找到原因了,类似于第二条吧,在post账号和密码之后,还有一个post,只post账号就行,就是还不知道当 ...
登录后显示更多的图片 是现在很多网站的共性
方便网站管理者统计用户量 用户量越多收入也就越多 如果不登录很难统计用户量 而且统计的数据不准确 ooo
页:
1
[2]