马上注册,结交更多好友,享用更多功能^_^
您需要 登录 才可以下载或查看,没有账号?立即注册
x
import requests # 导入网络请求模块
from bs4 import BeautifulSoup # html解析库
url = 'http://quotes.toscrape.com/tag/inspirational/' # 定义请求地址
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36'}
response = requests.get(url,headers) # 发送网络请求
if response.status_code==200: # 如果请求成功
#创建一个BeautifulSoup对象,获取页面正文
soup = BeautifulSoup(response.text, features="lxml")
text_all = soup.find_all('span',class_='text') # 获取所有显示励志名句的span标签
txt_file = open('data.txt','w',encoding='utf-8') # 创建open对象
for i,value in enumerate(text_all): # 循环遍历爬取内容
txt_file.write(str(i)+value.text+'\n') # 写入每条爬取的励志名句并在结尾换行
txt_file.close() # 关闭文件操作
|