鱼C论坛

 找回密码
 立即注册
12
返回列表 发新帖
楼主: wcq15759797758

[技术交流] 回复网址和需要的数据需求 我去写爬虫

[复制链接]
 楼主| 发表于 2021-8-6 01:07:18 | 显示全部楼层
龖釋 发表于 2021-8-4 17:37
12306每个车站每天的车次信息及每车次的经停站

我康康去
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-8-6 09:01:41 | 显示全部楼层
wcq15759797758 发表于 2021-8-6 01:06
分析收藏夹视频写完了 然后分析了视频里面的一共有几集 全部下载  合并视频和音频
做到定时同步到本地  ...

定时同步,我想的是 每下载一个视频就记录下 视频的 id,data-aid="BV1WP4y1x7bh"
下一次 下载的时候比较视频 id,如果发现一样,那就说明这之后的视频已经下载过了,后面的就不在继续下载了
定时可以用 apscheduler
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-8-9 16:13:47 | 显示全部楼层

这个包是在哪里抓到的  我咋没看到这个包
data = {'formhash':'e46ae81d',
            'referer':'https://fishc.com.cn/index.php',
            'username':'',   #帐号
            'password':'',    #   密码
            'questionid':'0'
            }
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-8-9 19:24:39 | 显示全部楼层
wp231957 发表于 2021-8-9 16:13
这个包是在哪里抓到的  我咋没看到这个包
data = {'formhash':'e46ae81d',
            'referer':'htt ...

这个是url登录的参数
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-8-10 09:31:59 | 显示全部楼层
youtobe的视频
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-13 15:47

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表