python爬取网页，发生字符编码错误，求解。

hhit

代码
import requests
r = requests.get("https://sh.lianjia.com/ershoufang/")
print(r.status_code)
print(r.apparent_encoding)
print(r.text)

返回

C:\Users\Administrator\AppData\Local\Programs\Python\Python35-32\python.exe C:/Users/Administrator/Desktop/Nyspider-master/anjuke/muke.py
200
utf-8
Traceback (most recent call last):
  File "C:/Users/Administrator/Desktop/Nyspider-master/anjuke/muke.py", line 11, in <module>
    print(r.text)
UnicodeEncodeError: 'gbk' codec can't encode character '\xa9' in position 160527: illegal multibyte sequence

Process finished with exit code 1

但是如果用
import requests
import sys, io
sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf-8')
r = requests.get("https://sh.lianjia.com/ershoufang/")
print(r.status_code)
print(r.apparent_encoding)
print(r.text)



返回
<script type="text/template" id="newAddHouseTpl">
  <div class="newAddHouse">
    鑷�浠庢偍涓婃�℃祻瑙堬紙<%=time%>锛変箣鍚庯紝璇ユ悳绱㈡潯浠朵笅鏂板�炲姞浜�<%=count%>濂楁埧婧&#65533;
    <a href="<%=url%>" class="LOGNEWERSHOUFANGSHOW" <%=logText%>><%=linkText%></a>

里面汉字都是乱码了，求解，谢谢。

新手·ing

Python2吗？
我这没问题（Python3）

sunlight070

网站用了utf-8格式编码，建议采用decode方法转换为utf-8

mingminglm

加res.encoding＝'gbk'gbk就不乱码了

hhit

新手·ing 发表于 2018-2-4 07:18
Python2吗？
我这没问题（Python3）

我用的也是3，但是不知道怎么会出错

hhit

mingminglm 发表于 2018-2-4 09:41
加res.encoding＝'gbk'gbk就不乱码了

Traceback (most recent call last):
  File "C:/Users/Administrator/Desktop/Nyspider-master/anjuke/qq.py", line 6, in <module>
    print(r.text)
UnicodeEncodeError: 'gbk' codec can't encode character '\ufffd' in position 1011: illegal multibyte sequence

网页主体是utf-8，设置成gbk那好像也会别的错误唉

月亮下的么么哒

加try。。。except吧，要想代码长时间运行，这是最可靠的。