爬虫爬图片

君子好逑

1. import requests
   
2. from lxml import etree
   
3. import os
   
4. 
   
5. headers = {
   
6. 'Accept-Language': 'zh-CN',
   
7. 'Cache-Control': 'no-cache',
   
8. 'Connection': 'Keep-Alive',
   
9. 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.102 Safari/537.36 Edge/18.18363'
   
10. }
    
11. 
    
12. url = 'https://cn.freeimages.com/'
    
13. 
    
14. html = requests.get(url=url,headers=headers).text
    
15. 
    
16. tree = etree.HTML(html)
    
17. 
    
18. li_list = tree.xpath('//div[@class="collage-body"]/ul/li')
    
19. 
    
20. if not os.path.exists('./photo'):
    
21.     os.mkdir('./photo')
    
22. 
    
23. for each in li_list:
    
24.     img_src = each.xpath('./a/img/@src')[0]
    
25.     img_name = img_src.split('/')[-1]
    
26.     img_path = 'patu' + img_name
    
27. 
    
28.     image = requests.get(url=url,headers=headers).content
    
29. 
    
30.     img_path ='photo/' + img_name
    
31. 
    
32.     with open(img_path,'wb') as f:
    
33.         f.write(image)
    
34.         print(img_name,'爬取完成！！！')
    

复制代码

写了个爬虫爬图片，但是爬出来的图片全是损坏的，根本打不开。有大佬能给瞅一眼吗

1q23w31

1. import requests
   
2. from lxml import etree
   
3. import os
   
4. 
   
5. headers = {
   
6. 'Accept-Language': 'zh-CN',
   
7. 'Cache-Control': 'no-cache',
   
8. 'Connection': 'Keep-Alive',
   
9. 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.102 Safari/537.36 Edge/18.18363'
   
10. }
    
11. 
    
12. url = 'https://cn.freeimages.com/'
    
13. 
    
14. html = requests.get(url=url,headers=headers).text
    
15. 
    
16. tree = etree.HTML(html)
    
17. 
    
18. li_list = tree.xpath('//div[@class="collage-body"]/ul/li')
    
19. 
    
20. if not os.path.exists('./photo'):
    
21.     os.mkdir('./photo')
    
22. 
    
23. for each in li_list:
    
24.     img_src = each.xpath('./a/img/@src')[0]
    
25.     img_name = img_src.split('/')[-1]
    
26.     img_path = 'patu' + img_name
    
27. 
    
28.     image = requests.get(img_src,headers=headers).content
    
29. 
    
30.     img_path ='photo/' + img_name
    
31. 
    
32.     with open(img_path,'wb') as f:
    
33.         f.write(image)
    
34.         print(img_name,'爬取完成！！！')
    
35. 
    

复制代码

源代码错误在第28行

君子好逑

1q23w31 发表于 2020-8-25 14:04
源代码错误在第28行

君子好逑

1q23w31 发表于 2020-8-25 14:04
源代码错误在第28行

谢谢大佬

君子好逑

1q23w31 发表于 2020-8-25 14:04
源代码错误在第28行

刚刚试了一下，爬的图片还是打不开

1q23w31

君子好逑 发表于 2020-8-25 14:51
刚刚试了一下，爬的图片还是打不开

不会啊，代码我测试过了

君子好逑

1q23w31 发表于 2020-8-25 15:01
不会啊，代码我测试过了

我刚粘玩还是不行

君子好逑

1q23w31 发表于 2020-8-25 15:01
不会啊，代码我测试过了

我太难了

1q23w31

君子好逑 发表于 2020-8-25 15:09
我刚粘玩还是不行

看私聊？

君子好逑

1q23w31 发表于 2020-8-25 15:01
不会啊，代码我测试过了

这回可以了

君子好逑

1q23w31 发表于 2020-8-25 15:01
不会啊，代码我测试过了

之前就出一个conda activate base的字样就没了

1q23w31

君子好逑 发表于 2020-8-25 15:11
这回可以了

ok

君子好逑

1q23w31 发表于 2020-8-25 15:10
看私聊？

不用了，谢谢大佬，大老牛逼。之前也有人跟我说visual studio code容易崩
喜极而泣，喜极而泣，妹子图我来了

君子好逑

1q23w31 发表于 2020-8-25 15:10
看私聊？

大佬，有没有什么妹子图免费下的网站给我推荐几个，二次元的更好

加油~~~~

君子好逑 发表于 2020-8-25 15:15
大佬，有没有什么妹子图免费下的网站给我推荐几个，二次元的更好

https://yande.re/post这个你因该喜欢

君子好逑

加油~~~~ 发表于 2020-8-25 16:33
https://yande.re/post这个你因该喜欢

老铁，你这网站有点东西啊

加油~~~~

君子好逑 发表于 2020-8-25 16:37
老铁，你这网站有点东西啊

这边推荐您改完host 直接使用Google浏览器访问

KINGofCODING

加油~~~~ 发表于 2020-8-26 10:14
这边推荐您改完host 直接使用Google浏览器访问

这网站需要翻墙啊，xd