数据处理与存储（TXT文件存储）

wcq15759797758

1. import requests     # 导入网络请求模块
   
2. from bs4 import BeautifulSoup  # html解析库
   
3. 
   
4. url = 'http://quotes.toscrape.com/tag/inspirational/'   # 定义请求地址
   
5. headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36'}
   
6. response = requests.get(url,headers)   # 发送网络请求
   
7. if response.status_code==200:   # 如果请求成功
   
8.     #创建一个BeautifulSoup对象，获取页面正文
   
9.     soup = BeautifulSoup(response.text, features="lxml")
   
10.     text_all = soup.find_all('span',class_='text')   # 获取所有显示励志名句的span标签
    
11.     txt_file = open('data.txt','w',encoding='utf-8') # 创建open对象
    
12.     for i,value in enumerate(text_all):              # 循环遍历爬取内容
    
13.         txt_file.write(str(i)+value.text+'\n')       # 写入每条爬取的励志名句并在结尾换行
    
14.     txt_file.close()                                 # 关闭文件操作

复制代码