【升级的爬虫】全自动爬取网易云任意歌曲热门 / 最新评论

做最好的自己520 · 发表于 2021-8-25 15:01:02

厉害厉害

0HB · 发表于 2021-8-25 15:22:41

哈哈顺带一提，在本帖中分享的截图———“热门评论”中，有俺;

0HB · 发表于 2021-8-25 15:24:13

小伤口发表于 2021-8-25 12:11
太好了，学习学习，正好需要这个，感谢(O)

客气了
祝学有所成

临时号 · 发表于 2021-8-25 15:35:05

学习

Kayko · 发表于 2021-8-25 15:46:50

Kayko · 发表于 2021-8-25 15:50:29

让记忆定格 · 发表于 2021-8-25 20:19:45

学习

星辰雨沫 · 发表于 2021-8-25 20:50:43

牛逼，大佬用的是什么界面啊

0HB · 发表于 2021-8-25 21:01:43

星辰雨沫发表于 2021-8-25 20:50
牛逼，大佬用的是什么界面啊

不是大佬

哈哈，这里没做ui用的是pycharm自带的Darcula（吸血鬼模式）界面

StudyPython_1 · 发表于 2021-8-26 11:08:26

来了

aironeng · 发表于 2021-8-26 15:14:58

学习

aironeng · 发表于 2021-8-26 15:18:29

大佬

还有苦味 · 发表于 2021-8-26 15:19:43

ly293 · 发表于 2021-8-26 16:12:39

fxj2002 · 发表于 2021-8-26 19:04:41

s3211207 · 发表于 2021-8-26 20:27:35

学习学习

一只魈咸鱼 · 发表于 2021-8-27 11:04:15

请问小甲鱼早年的爬虫教程意义大吗还，现在反爬更新换代这么快

0HB · 发表于 2021-8-27 11:05:15

本帖最后由 0HB 于 2021-8-27 11:14 编辑

一只魈咸鱼发表于 2021-8-27 11:04
请问小甲鱼早年的爬虫教程意义大吗还，现在反爬更新换代这么快

看到目前为止感觉不是弹幕说的那样不成功还是挺有用的（第一版python基础教程）

0HB · 发表于 2021-8-27 11:11:17

本帖最后由 0HB 于 2021-8-27 11:13 编辑

0HB 发表于 2021-8-27 11:05
学到目前为止感觉不是弹幕说的那样不成功还是挺有用的（我是学的第一版python基础教程）

豆瓣我试了可以。网易云音乐是我觉得不全面才做的整合。其他的爬取只要体量不大的网站，headers全一些（host、refer、user-agent...），cookies加进去，基本可以的。当需要爬取非常大量数据时，记得代理ip。老教程思路（主要学思路、流程）完全可行。而那些反爬机制强、技术壁垒高的网站是不会拿来做实验，当教材的

（或许，也就是说，当基础教程，它的意义已是足够了）

一只魈咸鱼 · 发表于 2021-8-27 11:53:24

0HB 发表于 2021-8-27 11:05
看到目前为止感觉不是弹幕说的那样不成功还是挺有用的（第一版python基础教程）

我的基础就是看的小甲鱼的python，确实有些语句已经被取代了，然后看近期的爬虫教程好多都实现不了，小甲鱼的就更没打算看。不过听你这么一说，我倒是再去拜读一波

账号		自动登录	找回密码
密码			立即注册

[作品展示] 【升级的爬虫】全自动爬取网易云任意歌曲热门 / 最新评论

回帖奖励 +5 鱼币

回帖奖励 +5 鱼币

[作品展示] 【升级的爬虫】全自动爬取网易云 任意歌曲 热门 / 最新 评论

回帖奖励 +5 鱼币

回帖奖励 +5 鱼币

[作品展示] 【升级的爬虫】全自动爬取网易云任意歌曲热门 / 最新评论