爬取妹子图三部曲

Mr.WJJ · 发表于 2020-3-8 15:27:44

楼主，我想请教一个问题
headers ={'Referer':'https://www.mzitu.com',
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 UBrowser/6.1.2107.204 Safari/537.36'}这行代码
这里的'Referer':'https://www.mzitu.com'是什么用处，我学习大佬您的代码的时候没有加这个，然后每次爬虫爬出来的图片都显示禁止盗图，然后加上去以后就能成功运行了

夏夜飞雪 · 发表于 2020-3-8 16:02:19

我来审核一下，貌似不合格。
我机子不行，让我再调一调

我家有个小笨豆 · 发表于 2020-3-8 16:07:28

66666666

shixiaobin · 发表于 2020-3-8 20:33:16

学习一下，没研究过，谢谢

学Python不开车 · 发表于 2020-3-8 20:52:16

Mr.WJJ 发表于 2020-3-8 15:27
楼主，我想请教一个问题
headers ={'Referer':'https://www.mzitu.com',
'User-Agent': 'Mozilla/5.0 (Wi ...

我也是刚开始，你可以去看下request.get()很多我还没有学会，不能做详细的解释。大概意思是：浏览器在向 web 服务器发送一个 http 请求的时候，服务器会把 http 的请求包装成一个 request 对象，在这些请求里面就包括 referer，它的意思是要告诉服务器，该请求来自哪里。简单来讲就是你理解的意思设置这个 referer 可以防止盗链的问题，加上就不会出现禁止盗图，不加就会出现。具体怎样你可以自己多搜索搜索

水獭子 · 发表于 2020-3-8 21:08:43

咳咳咳，爬起来

Zhangsanfeng1 · 发表于 2020-3-8 23:20:42

...(*￣０￣)ノ[等等我…我……我…………]

Mr.WJJ · 发表于 2020-3-9 10:24:55

学Python不开车发表于 2020-3-8 20:52
我也是刚开始，你可以去看下request.get()很多我还没有学会，不能做详细的解释。大概意思是：浏览器在向 ...

好的，多谢楼主回复

Bestenya · 发表于 2020-3-9 10:33:18

参观学习

我是混子 · 发表于 2020-3-9 10:45:18

上车

ly234 · 发表于 2020-3-9 11:06:02

学习，学习

18809347882 · 发表于 2020-3-9 12:02:38

gagdaga

diandian2 · 发表于 2020-3-9 14:12:58

厉害

殒命 · 发表于 2020-3-9 15:49:08

车不车的无所谓主要是为了学习

yuan562320578 · 发表于 2020-3-9 17:40:18

python 都自带那些模块呢？

会员色 · 发表于 2020-3-9 17:50:27

樱花小拳手 · 发表于 2020-3-10 01:22:56

鱼哥，你这车我坐定了

DavidCT · 发表于 2020-3-10 10:09:34

向老司机学习

wuhaha_168 · 发表于 2020-3-10 10:12:57

好好学习，我也要帕图。

pyxiaocainiao · 发表于 2020-3-10 22:53:22

车不车的无所谓真的就是想学习！！照片呢？？？

账号		自动登录	找回密码
密码			立即注册

[作品展示] 爬取妹子图 三部曲

[作品展示] 爬取妹子图三部曲