Javascript页面自动分页是怎么触发的

getfeel

1q23w31 发表于 2020-8-22 18:09
方便远程吗?

谢谢，我好像找到原因了，应该是cookies的原因。

我一直用的是登录页面返回的cookies。
刚刚看到有同学提到cookies。
我就把浏览器上这个页面里的cookies复制到程序里，就成功了。。。。
我再抓取一下两种cookies比较一下。

admintest166

我看了一下你的回答 我不知道我的理解对不对  浏览器显示所有数据 但是爬虫却要分页  1.可能有请求头反爬 2.有登录验证 （如没有登录就显示14条 登录就显示全部数据 ）  
也可以看看是不是AJAX加载

getfeel

admintest166 发表于 2020-8-22 22:58
我看了一下你的回答 我不知道我的理解对不对  浏览器显示所有数据 但是爬虫却要分页  1.可能有请求头反爬 2 ...

后来找到原因了，类似于第二条吧，在post账号和密码之后，还有一个post，只post账号就行，就是还不知道当时网站这么设计的逻辑是什么，，，

admintest166

getfeel 发表于 2020-9-20 21:09
后来找到原因了，类似于第二条吧，在post账号和密码之后，还有一个post，只post账号就行，就是还不知道当 ...

登录后显示更多的图片 是现在很多网站的共性
方便网站管理者统计用户量 用户量越多收入也就越多 如果不登录很难统计用户量 而且统计的数据不准确

城中城

ooo