[已解决]Python爬虫05(朋友实训项目)

liyifeng295641

用豆瓣网https://www.douban.com/                                                                                            
爬取豆瓣音乐—分类浏览—流行相关数据
要求数据量不小于120个，最终数据以excel表格的形式保存。Excel表格要求有表头，数据内容行数×列数>120个
能打开，能查看，用最简单的方法，有内容

最佳答案

月排行榜 / 总排行榜

FishC

2024-1-2 16:55:26

要实现这个需求，可以使用Python的requests和BeautifulSoup库来进行网页的爬取和数据提取，再使用pandas库将数据保存为Excel表格。下面是一个简单的实现代码：

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. import pandas as pd
   
4. 
   
5. # 发送GET请求获取网页内容
   
6. url = 'https://music.douban.com/tag/#/?tag=流行'
   
7. response = requests.get(url)
   
8. html = response.text
   
9. 
   
10. # 解析网页内容
    
11. soup = BeautifulSoup(html, 'html.parser')
    
12. items = soup.find_all('a', class_='nbg')
    
13. 
    
14. # 提取相关数据
    
15. data = []
    
16. for item in items:
    
17.     title = item.get('title')
    
18.     href = item.get('href')
    
19.     data.append({'标题': title, '链接': href})
    
20. 
    
21. # 将数据保存为Excel表格
    
22. df = pd.DataFrame(data)
    
23. df.to_excel('豆瓣音乐流行相关数据.xlsx', index=False)

复制代码

在这个示例代码中，我使用了豆瓣音乐的流行标签页面作为示例，你也可以根据自己的需要修改URL参数。

需要注意的是，由于导出Excel表格需要安装pandas库，如果你还没有安装可以使用以下命令进行安装：

1. pip install pandas

复制代码

运行以上代码后，会在当前目录下生成一个名为"豆瓣音乐流行相关数据.xlsx"的Excel文件，其中包含了爬取到的音乐标题和链接。

以上回复来自 FishC AI 小助理，如未能正确解答您的问题，请继续追问。

跳转到最佳答案楼层

FishC

要实现这个需求，可以使用Python的requests和BeautifulSoup库来进行网页的爬取和数据提取，再使用pandas库将数据保存为Excel表格。下面是一个简单的实现代码：

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. import pandas as pd
   
4. 
   
5. # 发送GET请求获取网页内容
   
6. url = 'https://music.douban.com/tag/#/?tag=流行'
   
7. response = requests.get(url)
   
8. html = response.text
   
9. 
   
10. # 解析网页内容
    
11. soup = BeautifulSoup(html, 'html.parser')
    
12. items = soup.find_all('a', class_='nbg')
    
13. 
    
14. # 提取相关数据
    
15. data = []
    
16. for item in items:
    
17.     title = item.get('title')
    
18.     href = item.get('href')
    
19.     data.append({'标题': title, '链接': href})
    
20. 
    
21. # 将数据保存为Excel表格
    
22. df = pd.DataFrame(data)
    
23. df.to_excel('豆瓣音乐流行相关数据.xlsx', index=False)

复制代码

在这个示例代码中，我使用了豆瓣音乐的流行标签页面作为示例，你也可以根据自己的需要修改URL参数。

需要注意的是，由于导出Excel表格需要安装pandas库，如果你还没有安装可以使用以下命令进行安装：

1. pip install pandas

复制代码

运行以上代码后，会在当前目录下生成一个名为"豆瓣音乐流行相关数据.xlsx"的Excel文件，其中包含了爬取到的音乐标题和链接。

以上回复来自 FishC AI 小助理，如未能正确解答您的问题，请继续追问。