鱼C论坛

 找回密码
 立即注册
查看: 2670|回复: 2

[已解决]写入txt文件时出现乱码

[复制链接]
发表于 2020-9-3 10:41:03 | 显示全部楼层 |阅读模式
10鱼币
  1. #-*- codeing = utf-8 -*-

  2. import urllib.request
  3. import re
  4. #import xlwt
  5. import bs4

  6. def main():
  7.     url = 'https://www.qiushibaike.com/text/page/'
  8.     saveData('糗事百科段子.txt', getData(url))

  9.                


  10. def url_open(url):
  11.     head = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36'}
  12.     req = urllib.request.Request(url, headers=head)

  13.     html = ""
  14.     try:
  15.         response = urllib.request.urlopen(req)
  16.         html = response.read().decode('utf-8')
  17.     except urllib.error.URLError as e:
  18.         if hasattr(e, 'code'):
  19.             print(e.code)
  20.         if hasattr(e, 'reason'):
  21.             print(e.reason)
  22.     return html


  23. def getData(url):
  24.     html = url_open(url)
  25.     bs = bs4.BeautifulSoup(html, 'html.parser')
  26.     t_list = bs.find_all('div', attrs = {'class' : 'content'})
  27.     text_list = []
  28.     #t_list = bs.find_all(text = 'span')
  29.     for item in t_list:
  30.         text_list.append(item.find('span').text)
  31.     return text_list


  32. def saveData(fileurl, t_list):
  33.     for each in t_list:
  34.         with open(fileurl, 'a+', encoding = 'utf-8') as f:
  35.             f.write(each)

  36. if __name__ == "__main__":
  37.     main()
复制代码

以上代码时我从糗事百科中爬出来的段子,把爬出来的内容写入txt文件,在txt文件中出现乱码

                               
登录/注册后可看大图

大神门看看我!!!
最佳答案
2020-9-3 10:41:04
试了一下,没有遇到乱码问题,楼主尝试重新运行一下

最佳答案

查看完整内容

试了一下,没有遇到乱码问题,楼主尝试重新运行一下
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2020-9-3 10:41:04 | 显示全部楼层    本楼为最佳答案   
试了一下,没有遇到乱码问题,楼主尝试重新运行一下

糗事百科段子.zip

5.19 KB, 下载次数: 0

小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-9-3 11:55:26 | 显示全部楼层
1q23w31 发表于 2020-9-3 11:41
试了一下,没有遇到乱码问题,楼主尝试重新运行一下

的确我把txt文件删除重新写入就没有这样的问题了
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-4-28 03:01

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表