【爬取鱼C 3W+ 条数据】通过 Pandas & Matplotlib 简单的处理数据和绘制的图表

Twilight6 · 发表于 2020-5-28 23:59:32

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有帐号？立即注册

x

本帖最后由 Twilight6 于 2020-6-3 14:30 编辑

Matplotlib.pyplot实战——绘制简单图表

登录/注册后可看大图

笔记索引：matplotlib.pyplot 之折线图

笔记索引：matplotlib.pyplot 之散点图

4月底正好刚刚开始接触数据可视化，当时就想爬些数据拿来练习，可又一直感觉找不到可以爬的数据...

突然有一天一个念头从我脑海一闪而过——我一天天的在论坛里划水，为什么不爬些论坛的数据呢？结果就有了这个帖子......

当时爬虫写了十来分钟，爬数据爬了1小时半......因为我怕给服务器 压力太大，而且当时也闲着，电脑也没干啥，就 time.sleep 爬一页休息 5 秒

睡个午觉醒来，发现 1000 页的数据就全爬完了~~~可是Python交流板块明明 1200+ 页的，我发现后面几页怎么也访问不了，就算了

只爬取了每页的帖名，浏览量，评论量，一页有 32 个帖子，一共爬了1000页， 本还想爬作者的

可是我数据提取还不熟练，VIP 用户和非 VIP 用户里面的标签属性不同，而最后回帖的数据和作者的数据标签很类似，后面我就放弃爬作者了(学艺不精，唉！)

都是些简单的图表，大家将就着看看，我爬来的数据，不管适不适合这些图，我都搞了哈哈~

小提示：图片点击可放大观看

游客，如果您要查看本帖隐藏内容请回复

上面的图都很简单，数据也几乎直接打开文件就拿来用了

爬虫我的代码我就不放上去了~

嘿嘿~最后
你的评分，就是对楼主最大的鼓励！

登录/注册后可看大图

Tip0 · 发表于 2020-5-29 01:03:55

3万条数据...我去？

xiaosi4081 · 发表于 2020-5-29 07:26:40

wuqramy · 发表于 2020-5-29 08:48:16

have a look

宋恺 · 发表于 2020-5-29 08:53:52

看看

Twilight6 · 发表于 2020-5-29 08:58:15

都没人来，自己捞一捞

bailean · 发表于 2020-5-29 08:59:06

加油加油

Mike_python小 · 发表于 2020-5-29 09:02:25

育碧

larrydion · 发表于 2020-5-29 09:25:23

66666666

XFCoding · 发表于 2020-5-29 09:40:07

mark

路θ甲 · 发表于 2020-5-29 09:55:48

War丶Loads · 发表于 2020-5-29 10:34:20

hehey · 发表于 2020-5-29 11:09:38

tql

_2_ · 发表于 2020-5-29 13:21:05

……感觉没啥用

Twilight6 · 发表于 2020-5-29 13:23:12

_2_ 发表于 2020-5-29 13:21
……感觉没啥用

确实没啥用

小矫情 · 发表于 2020-5-29 13:54:29

厉害了

hu0611031591 · 发表于 2020-5-29 14:54:06

不二如是 · 发表于 2020-5-29 17:04:55

加油～

Twilight6 · 发表于 2020-5-29 17:25:51

不二如是发表于 2020-5-29 17:04
加油～

嗯

登录/注册后可看大图

路θ甲 · 发表于 2020-5-29 17:54:59

Twilight6 发表于 2020-5-29 09:56
兄弟，别每次都这样操作好吗...你以为我看不见嘛

因为发太多会被删掉，所以还是自己主动点删掉（好吧，就是为了育碧）

帐号		自动登录	找回密码
密码			立即注册

[作品展示] 【爬取鱼C 3W+ 条数据】通过 Pandas & Matplotlib 简单的处理数据和绘制的图表

马上注册，结交更多好友，享用更多功能^_^

评分

本帖被以下淘专辑推荐:

回帖奖励 +2 鱼币

回帖奖励 +2 鱼币

回帖奖励 +2 鱼币

回帖奖励 +2 鱼币

小甲鱼强烈推荐 /1