[已解决]爬虫中的data元素是什么？

买路郎

data元素是什么意思？作用呢

最佳答案

月排行榜 / 总排行榜

破月霜华

2019-5-15 18:17:59

问: 当构建一个爬虫请求时，requests.post中的date元素如何确定

如

requests.post(url, data=post_data) #伪代码

这个post_data在爬取不同网站时其中的内容不一样，这个内容应该如何确定？

答:
用post提交表需要确认服务器需要的数据项，然后组成json对。

1. requests.post(url=url, data=data)

复制代码

我觉得楼主说的是data的提交。

一般用浏览器的开发者工具确认网页请求时候的方法，cookie，请求头等等
也就是说data也可以在这里找到
模拟一次提交表的过程，就可以看到提交的参数项了

                               
登录/注册后可看大图

                               
登录/注册后可看大图

1. requests.post(headers=headers,params=json.dumps(payload),url=url)

复制代码

                             ---转载自[segmentfault]

跳转到最佳答案楼层

破月霜华

问: 当构建一个爬虫请求时，requests.post中的date元素如何确定

如

requests.post(url, data=post_data) #伪代码

这个post_data在爬取不同网站时其中的内容不一样，这个内容应该如何确定？

答:
用post提交表需要确认服务器需要的数据项，然后组成json对。

1. requests.post(url=url, data=data)

复制代码

我觉得楼主说的是data的提交。

一般用浏览器的开发者工具确认网页请求时候的方法，cookie，请求头等等
也就是说data也可以在这里找到
模拟一次提交表的过程，就可以看到提交的参数项了

                               
登录/注册后可看大图

                               
登录/注册后可看大图

1. requests.post(headers=headers,params=json.dumps(payload),url=url)

复制代码

                             ---转载自[segmentfault]

快速收敛

这问题估计没人知道

kaohsing

post请求方式的data，是提交的表单数据。

TOP_LK

数据