python爬虫01(朋友实训项目)
本帖最后由 liyifeng295641 于 2024-1-3 16:09 编辑用豆瓣网爬取豆瓣音乐 分类浏览 流行相关数据
数据量大于100个，最终数据保存Excel，Excel表格要有表头 爬取内容行数×列数＞110 好的，你想爬取豆瓣音乐的流行相关数据，并保存到Excel表格中。下面是一个简单的Python爬虫示例代码，可以帮助你实现这个功能：
import requests
from bs4 import BeautifulSoup
import openpyxl
# 创建Excel表格
wb = openpyxl.Workbook()
sheet = wb.active
# 设置表头
sheet['A1'] = '歌曲名称'
sheet['B1'] = '艺术家'
# 发起HTTP请求获取豆瓣音乐首页的HTML内容
url = 'https://music.douban.com/chart'
response = requests.get(url)
html = response.text
# 使用BeautifulSoup解析HTML内容
soup = BeautifulSoup(html, 'html.parser')
# 定位需要爬取的音乐列表
music_list = soup.select('.col5')
# 遍历音乐列表，将数据写入Excel表格
for index, music in enumerate(music_list):
# 获取歌曲名称和艺术家信息
name = music.select_one('a').text.strip()
artist = music.select_one('.artist').text.strip()
# 将数据写入Excel表格
sheet.cell(row=index+2, column=1, value=name)
sheet.cell(row=index+2, column=2, value=artist)
# 控制爬取数量
if index >= 99:
break
# 保存Excel表格
wb.save('douban_music.xlsx')
请确保你已经安装了`requests`、`beautifulsoup4`和`openpyxl`库，你可以使用以下命令进行安装：
pip install requests beautifulsoup4 openpyxl
这段代码会爬取豆瓣音乐首页的流行相关数据，最多爬取100个音乐条目，并将数据保存到名为`douban_music.xlsx`的Excel表格中。在代码中，我们使用了`requests`库来发送HTTP请求获取网页内容，使用了`beautifulsoup4`库来解析HTML内容，以及使用了`openpyxl`库来操作Excel文件。
以上回复来自 FishC AI 小助理，如未能正确解答您的问题，请继续追问。
页:
[1]