[已解决]python爬虫，成功安装bs4，执行程序却保错:import requests from bs4 import Beaut...

huyanmin

1. 
   
2. #爬取三国演义小说
   
3. import requests
   
4. from bs4 import BeautifulSoup      #程序报错：ModuleNotFoundError: No module named 'html.entities'; 'html' is not a package， 这是怎么回事，该怎么解决
   
5. 
   
6. url='http://sanguo.5000yan.com/'
   
7. headers ={'User-Agent':'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Mobile Safari/537.36'}
   
8. 
   
9. response = requests.get(url=url,headers=headers)
   
10. response.encoding='utf-8'
    
11. page_text=response.text
    
12. 
    
13. soup = BeautifulSoup(page_text,'lxml')
    
14. #print(soup)
    
15. li_list = soup.select(".sidamingzhu-list-mulu>ul>li")
    
16. #print(li_list)
    
17. fp =open('./sanguo.txt','w',encoding='utf-8')#放到循环上面，保证文件被打开一次，这样所有章节都会被追加写入
    
18. for li in li_list:
    
19.     #解析标题和正文
    
20.     title =li.a.string
    
21.     detail_url =li.a['href']#一个IP就是对应一个网页或者一张图片
    
22.     response =requests.get(url=detail_url,headers=headers)
    
23.     response.encoding='utf-8'
    
24.     detail_url_text = response.text
    
25.     #解析正文
    
26.     detail_soup =BeautifulSoup(detail_url_text,'lxml')
    
27.     detail_tag =detail_soup.find('div',class_="grap")
    
28.     #print(detail_tag)
    
29.     content =detail_tag.text
    
30.     #fp =open('./sanguo.txt','w',encoding='utf-8')  #放到此处每循环一次，文件就会被打开一次，这样只有最后一次写入被保存
    
31.    
    
32.    
    
33.     fp.write(title +':::::::'+content+'\n')
    
34.     print(title,'下载成功')
    
35. 
    
36. url='http://sanguo.5000yan.com/'
    
37. headers ={'User-Agent':'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Mobile Safari/537.36'}
    
38. 
    
39. response = requests.get(url=url,headers=headers)
    
40. response.encoding='utf-8'
    
41. page_text=response.text
    
42. 
    
43. soup = BeautifulSoup(page_text,'lxml')
    
44. #print(soup)
    
45. li_list = soup.select(".sidamingzhu-list-mulu>ul>li")
    
46. #print(li_list)
    
47. fp =open('./sanguo.txt','w',encoding='utf-8')#放到循环上面，保证文件被打开一次，这样所有章节都会被追加写入
    
48. for li in li_list:
    
49.     #解析标题和正文
    
50.     title =li.a.string
    
51.     detail_url =li.a['href']#一个IP就是对应一个网页或者一张图片
    
52.     response =requests.get(url=detail_url,headers=headers)
    
53.     response.encoding='utf-8'
    
54.     detail_url_text = response.text
    
55.     #解析正文
    
56.     detail_soup =BeautifulSoup(detail_url_text,'lxml')
    
57.     detail_tag =detail_soup.find('div',class_="grap")
    
58.     #print(detail_tag)
    
59.     content =detail_tag.text
    
60.     #fp =open('./sanguo.txt','w',encoding='utf-8')  #放到此处每循环一次，文件就会被打开一次，这样只有最后一次写入被保存
    
61.    
    
62.    
    
63.     fp.write(title +':::::::'+content+'\n')
    
64.     print(title,'下载成功')

复制代码

最佳答案

月排行榜 / 总排行榜

临时号

2022-7-29 16:29:33

你的py文件存放路径下可能有一个文件的名字将html.py,把它换一个名字

跳转到最佳答案楼层

临时号

你的py文件存放路径下可能有一个文件的名字将html.py,把它换一个名字

huyanmin

临时号 发表于 2022-7-29 16:29
你的py文件存放路径下可能有一个文件的名字将html.py,把它换一个名字

非常感谢，困惑了我一下午

huyanmin

huyanmin 发表于 2022-7-29 17:02
非常感谢，困惑了我一下午

我的html.py和谁冲突了