论坛 › Python交流 › 【升级的爬虫】全自动爬取网易云 任意歌曲 热门 / 最新 评论

做最好的自己520 发表于 2021-8-25 15:01:02

厉害厉害{:10_275:}

0HB 发表于 2021-8-25 15:22:41

哈哈顺带一提，在本帖中分享的截图———“热门评论”中，有俺;{:9_227:}

0HB 发表于 2021-8-25 15:24:13

小伤口 发表于 2021-8-25 12:11
太好了，学习学习，正好需要这个，感谢(O)

客气了
祝学有所成{:10_302:}

临时号 发表于 2021-8-25 15:35:05

学习

Kayko 发表于 2021-8-25 15:46:50

{:10_257:}666

Kayko 发表于 2021-8-25 15:50:29

{:10_266:}

让记忆定格 发表于 2021-8-25 20:19:45

学习

星辰雨沫 发表于 2021-8-25 20:50:43

牛逼，大佬用的是什么界面啊

0HB 发表于 2021-8-25 21:01:43

星辰雨沫 发表于 2021-8-25 20:50
牛逼，大佬用的是什么界面啊

不是大佬{:10_278:}哈哈，这里没做ui用的是pycharm自带的Darcula（吸血鬼模式） 界面

StudyPython_1 发表于 2021-8-26 11:08:26

来了

aironeng 发表于 2021-8-26 15:14:58

学习

aironeng 发表于 2021-8-26 15:18:29

大佬

还有苦味 发表于 2021-8-26 15:19:43

ly293 发表于 2021-8-26 16:12:39

123

fxj2002 发表于 2021-8-26 19:04:41

{:5_95:}

s3211207 发表于 2021-8-26 20:27:35

学习学习

一只魈咸鱼 发表于 2021-8-27 11:04:15

请问小甲鱼早年的爬虫教程意义大吗还，现在反爬更新换代这么快

0HB 发表于 2021-8-27 11:05:15

本帖最后由 0HB 于 2021-8-27 11:14 编辑

一只魈咸鱼 发表于 2021-8-27 11:04
请问小甲鱼早年的爬虫教程意义大吗还，现在反爬更新换代这么快

看到目前为止 感觉不是弹幕说的那样不成功 还是挺有用的（第一版python基础教程）

0HB 发表于 2021-8-27 11:11:17

本帖最后由 0HB 于 2021-8-27 11:13 编辑

0HB 发表于 2021-8-27 11:05
学到目前为止 感觉不是弹幕说的那样不成功 还是挺有用的（我是学的第一版python基础教程）

豆瓣 我试了 可以。网易云音乐是我觉得不全面 才做的整合。其他的爬取只要体量不大的网站，headers全一些（host、refer、user-agent...），cookies加进去，基本可以的。当需要爬取非常大量数据时，记得代理ip。老教程思路（主要学思路、流程）完全可行。而那些反爬机制强、技术壁垒高的网站是不会拿来做实验，当教材的{:10_304:}（或许，也就是说，当基础教程，它的意义已是足够了）

一只魈咸鱼 发表于 2021-8-27 11:53:24

0HB 发表于 2021-8-27 11:05
看到目前为止 感觉不是弹幕说的那样不成功 还是挺有用的（第一版python基础教程）

我的基础就是看的小甲鱼的python，确实有些语句已经被取代了，然后看近期的爬虫教程好多都实现不了，小甲鱼的就更没打算看。不过听你这么一说，我倒是再去拜读一波{:5_111:}

查看完整版本: 【升级的爬虫】全自动爬取网易云 任意歌曲 热门 / 最新 评论