爬虫中网页解码方式改怎么选择

fengyexll

爬虫中网页解码方式改怎么选择，html = response.read('utf-8') 有时用 ('utf-8')可以，有时有不行，该如何选择？

拉了盏灯

response.encoding = 'utf_8'

wongyusing

一般我们平时就是用 utf-8 或者gbk  
如果想要知道用什么编码格式，可以直接使用utf-8进行测试，看到乱码就换成gbk  
不想测试的话在网页源代码中观察head标签中的meta标签的charset是什么，如下：

<meta charset="UTF-8">

而你现在看到的网页是gbk，你可以右键查看源代码，然后按下Ctrl + F 搜索   charset=    试试

罗同学

查看源代码、然后搜索“charset”就可以看到网站的编码方式了、如下图。

幽梦三影

建议使用requests，requests.get(url).text 或 requests.get(url).content.decode()基本上不会出现编码问题