鱼C论坛

 找回密码
 立即注册
查看: 2020|回复: 12

[已解决]B站爬取视频遇到的问题

[复制链接]
发表于 2021-2-28 15:36:57 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
现在想爬B站的视频了
目标URL:传送门
然后踩点
但是我不知道怎么爬取视频
那个画圈的网址也打不开,不知道视频在哪里
求具体过程,谢谢
最佳答案
2021-2-28 15:57:40
https://fishc.com.cn/thread-190000-1-1.html
仔细读下源代码,B站有API接口的

视频是在这里面吗

视频是在这里面吗
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2021-2-28 15:57:40 | 显示全部楼层    本楼为最佳答案   
https://fishc.com.cn/thread-190000-1-1.html
仔细读下源代码,B站有API接口的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:15:17 | 显示全部楼层
qiuyouzhi 发表于 2021-2-28 15:57
https://fishc.com.cn/thread-190000-1-1.html
仔细读下源代码,B站有API接口的

API接口是什么
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:18:10 | 显示全部楼层

然后BV号是在哪边看
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:19:06 | 显示全部楼层

这个BV我知道了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-2-28 16:23:07 | 显示全部楼层

自行百度呗,百度那么多
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:27:01 | 显示全部楼层
Daniel_Zhang 发表于 2021-2-28 16:23
自行百度呗,百度那么多

我知道了,可是为什么要把BV转成AV呢,AV不是早就不用了吗
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-2-28 16:28:01 | 显示全部楼层
柿子饼同学 发表于 2021-2-28 16:27
我知道了,可是为什么要把BV转成AV呢,AV不是早就不用了吗

个人感觉是反爬机制?

好像还有一个 cid
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:36:43 | 显示全部楼层
嗯我也找到密码表了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:40:01 | 显示全部楼层
Daniel_Zhang 发表于 2021-2-28 16:28
个人感觉是反爬机制?

好像还有一个 cid

我现在知道你写的啥了
谢谢
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 16:59:21 | 显示全部楼层
Daniel_Zhang 发表于 2021-2-28 16:28
个人感觉是反爬机制?

好像还有一个 cid

出问题了,是不是视频太大
=================== RESTART: C:/Users/86177/Desktop/Billi.py ===================
请输入视频BV或AV号:BV1QW411N762
准备下载【Web前端开发】《零基础入门学习Web开发》(HTML5&CSS3).flv...
开始下载...
Traceback (most recent call last):
  File "C:/Users/86177/Desktop/Billi.py", line 77, in <module>
    DBV.main()
  File "C:/Users/86177/Desktop/Billi.py", line 72, in main
    self.download_video(aid, cid, info['title'] + ".flv")
  File "C:/Users/86177/Desktop/Billi.py", line 60, in download_video
    video = self.open_url(url)
  File "C:/Users/86177/Desktop/Billi.py", line 9, in open_url
    res.encoding = res.apparent_encoding
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\requests\models.py", line 730, in apparent_encoding
    return chardet.detect(self.content)['encoding']
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\__init__.py", line 41, in detect
    detector.feed(byte_str)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\universaldetector.py", line 211, in feed
    if prober.feed(byte_str) == ProbingState.FOUND_IT:
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\charsetgroupprober.py", line 71, in feed
    state = prober.feed(byte_str)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\hebrewprober.py", line 227, in feed
    byte_str = self.filter_high_byte_only(byte_str)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\charsetprober.py", line 63, in filter_high_byte_only
    buf = re.sub(b'([\x00-\x7F])+', b' ', buf)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\re.py", line 210, in sub
    return _compile(pattern, flags).sub(repl, string, count)
MemoryError
>>> 
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-2-28 17:02:01 | 显示全部楼层
Daniel_Zhang 发表于 2021-2-28 16:28
个人感觉是反爬机制?

好像还有一个 cid

出错了,是不是容量太大
=================== RESTART: C:/Users/86177/Desktop/Billi.py ===================
请输入视频BV或AV号:BV1yA411H7w8
准备下载年轻人该不该留在京沪广深?网友:看完后恍然大悟!.flv...
开始下载...
Traceback (most recent call last):
  File "C:/Users/86177/Desktop/Billi.py", line 77, in <module>
    DBV.main()
  File "C:/Users/86177/Desktop/Billi.py", line 72, in main
    self.download_video(aid, cid, info['title'] + ".flv")
  File "C:/Users/86177/Desktop/Billi.py", line 60, in download_video
    video = self.open_url(url)
  File "C:/Users/86177/Desktop/Billi.py", line 9, in open_url
    res.encoding = res.apparent_encoding
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\requests\models.py", line 730, in apparent_encoding
    return chardet.detect(self.content)['encoding']
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\__init__.py", line 41, in detect
    detector.feed(byte_str)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\universaldetector.py", line 211, in feed
    if prober.feed(byte_str) == ProbingState.FOUND_IT:
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\charsetgroupprober.py", line 71, in feed
    state = prober.feed(byte_str)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\hebrewprober.py", line 227, in feed
    byte_str = self.filter_high_byte_only(byte_str)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\site-packages\chardet\charsetprober.py", line 63, in filter_high_byte_only
    buf = re.sub(b'([\x00-\x7F])+', b' ', buf)
  File "C:\Users\86177\AppData\Local\Programs\Python\Python39-32\lib\re.py", line 210, in sub
    return _compile(pattern, flags).sub(repl, string, count)
MemoryError
>>> 
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-2-28 17:08:58 | 显示全部楼层
柿子饼同学 发表于 2021-2-28 16:27
我知道了,可是为什么要把BV转成AV呢,AV不是早就不用了吗

接口要用AV号
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-16 11:04

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表