鱼C论坛

 找回密码
 立即注册
查看: 367|回复: 0

求助:如何通过ptyhon爬取公众号目录里的所有文章

[复制链接]
发表于 2024-8-24 17:11:33 | 显示全部楼层 |阅读模式
30鱼币
求助:如何通过ptyhon爬取公众号目录里的所有文章

我想爬取一些越语翻译的资料,
爬取地址为:
https://mp.weixin.qq.com/mp/appm ... d=1#wechat_redirect
通过拖动文章滑动键,每10个文章会有一个post响应文件
https://mp.weixin.qq.com/mp/appm ... amp;x5=0&f=json

1、如果直接爬取只能爬前10个文章,每个文章的url会有好几个地方变化,找不到规律,这种情况应该如何解决?
2、post响应的url中其他信息都不变,但是begin_msgid=XXX,这里的数字会变化,找不到什么规律,请教各位大神,这种情况应该如何解决?

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-12-22 19:18

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表