爬虫图片保存

Chihirotlmt

怎么将一个网站中很多名字相同的图片也爬取保存在本地 ，文件写入部分代码该怎么写？

isdkz

你可以使用Python的requests和BeautifulSoup库来爬取网站上的图片，并将它们保存在本地。以下是一个示例代码来实现这个功能：

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. import os
   
4. 
   
5. # 发送GET请求获取网页内容
   
6. url = '你要爬取的网站URL'
   
7. response = requests.get(url)
   
8. 
   
9. # 使用BeautifulSoup解析网页内容
   
10. soup = BeautifulSoup(response.text, 'html.parser')
    
11. 
    
12. # 找到所有图片的标签
    
13. img_tags = soup.find_all('img')
    
14. 
    
15. # 创建一个文件夹来保存图片
    
16. os.makedirs('images', exist_ok=True)
    
17. 
    
18. # 遍历所有图片标签并保存图片
    
19. for img_tag in img_tags:
    
20.     img_url = img_tag['src']
    
21.     img_name = img_url.split('/')[-1]
    
22.     img_data = requests.get(img_url).content
    
23.     with open(f'images/{img_name}', 'wb') as f:
    
24.         f.write(img_data)
    

复制代码

在这个示例中，我们首先发送GET请求获取网页内容，然后使用BeautifulSoup解析网页内容，找到所有的图片标签。接着我们创建一个名为"images"的文件夹来保存图片，并遍历所有图片标签，将图片保存在本地。