鱼C论坛

 找回密码
 立即注册
查看: 1530|回复: 6

[已解决]爬虫问题(为什么总是被删帖啊)

[复制链接]
发表于 2020-7-3 14:35:03 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
关于网易云爬取评论,小甲鱼老师视频中的用到的网址带有数字,数字就是歌曲代名词,但我爬取的时候是https://music.163.com/weapi/comment/resource/comments/get?csrf_token=
get那个地方应该是数字 ,可是这里是get,我就不能任意爬取歌曲评论了,应该怎么办?
最佳答案
2020-7-3 17:22:37
今天的我更强了 发表于 2020-7-3 14:59
不是的,小甲鱼爬取时候的网址为https://music.163.com/weapi/v1/resource/comments/R_SO_4_25251545?csr ...

网站更新了而已,现在歌曲ID在POST提交的params参数里
总共需要提交2个参数,params是AES加密,encSecKey是RSA加密,具体加密分析可用搜索查询

另外给你一个无加密,直接可Get获取的api
http://music.163.com/api/v1/resource/comments/R_SO_4_1426649237?offset=0&limit=10
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-7-3 14:35:47 | 显示全部楼层
抓包看看里面有没有csrf_token呗
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-7-3 14:48:56 | 显示全部楼层
qiuyouzhi 发表于 2020-7-3 14:35
抓包看看里面有没有csrf_token呗

什么意思..没找到这样单独一个包,但很多都带有这个的后缀
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-7-3 14:50:04 | 显示全部楼层
今天的我更强了 发表于 2020-7-3 14:48
什么意思..没找到这样单独一个包,但很多都带有这个的后缀

你的意思是不是
csrf_token=
等号后面应该有个数字?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-7-3 14:59:06 | 显示全部楼层
qiuyouzhi 发表于 2020-7-3 14:50
你的意思是不是
csrf_token=
等号后面应该有个数字?

不是的,小甲鱼爬取时候的网址为https://music.163.com/weapi/v1/resource/comments/R_SO_4_25251545?csrf_token=
数字是我乱打的,但不同的数字能够代表不同的歌曲,而我爬取的时候只有get字母
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-7-3 17:22:37 | 显示全部楼层    本楼为最佳答案   
今天的我更强了 发表于 2020-7-3 14:59
不是的,小甲鱼爬取时候的网址为https://music.163.com/weapi/v1/resource/comments/R_SO_4_25251545?csr ...

网站更新了而已,现在歌曲ID在POST提交的params参数里
总共需要提交2个参数,params是AES加密,encSecKey是RSA加密,具体加密分析可用搜索查询

另外给你一个无加密,直接可Get获取的api
http://music.163.com/api/v1/resource/comments/R_SO_4_1426649237?offset=0&limit=10
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-7-3 20:53:14 | 显示全部楼层
comeheres 发表于 2020-7-3 17:22
网站更新了而已,现在歌曲ID在POST提交的params参数里
总共需要提交2个参数,params是AES加密,encSecKe ...

谢谢
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-4-26 01:24

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表