鱼C论坛

 找回密码
 立即注册
查看: 1642|回复: 2

如何爬取bilibili创作中心的数据

[复制链接]
发表于 2020-8-18 13:09:22 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
我想写一段爬取自己视频数据的代码,但不知道网址填什么
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-8-18 13:17:49 | 显示全部楼层
本帖最后由 suchocolate 于 2020-8-18 13:22 编辑

思路1:(第一项新手比较难,建议看完相关书再试)
1.先模拟登陆:selenium+租验证码识别api。
2.用xpath处理想要的信息。

思路2:获取cookie之后任意次访问。
1.先用selenium打开浏览器,手工登陆,获取cookie。(只做一次)
2.requests调用cookie访问创作中心。
3.用xpath处理想要的信息。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-8-18 15:22:46 | 显示全部楼层
巧用F12控制台,分析"我的视频"的接口,用requests 模拟访问,看看返回的json有没有视频的相关链接.因为我也没上传过视频,所以data是空的,你可以试试看.
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-19 11:07

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表