爬虫，print网页出问题了

苏绛雪

别的都没问题，就是print出问题了

1. import requests
   
2. #分析目标网页，确定爬取url路径，headers参数。
   
3. base_url='https://tieba.baidu.com/f?ie=utf-8&kw=%E7%BE%8E%E5%A5%B3'#kw后面发生了变化
   
4. headers = {
   
5.     'user-agent': "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36"}
   
6. 
   
7. response=requests.get(base_url,headers=headers)
   
8. html_str=response.text
   
9. #html_str=html_str.encoding('utf-8')
   
10. print(html_str)

复制代码

zltzlt

不要用 IDLE 运行，双击运行以下程序：

1. import requests
   
2. 
   
3. # 分析目标网页，确定爬取url路径，headers参数。
   
4. base_url = 'https://tieba.baidu.com/f?ie=utf-8&kw=%E7%BE%8E%E5%A5%B3'  # kw后面发生了变化
   
5. headers = {
   
6.     'user-agent': "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_3) "
   
7.                   "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36"}
   
8. 
   
9. response = requests.get(base_url, headers=headers)
   
10. html_str = response.text
    
11. # html_str=html_str.encoding('utf-8')
    
12. print(html_str)
    
13. input()

复制代码

wp231957

ucs-2是一个和已知的utf8什么的都不一样的编码

°蓝鲤歌蓝

https://fishc.com.cn/thread-102403-1-1.html
巧了，很久以前我也碰到过和你一模一样的问题。