[已解决]爬虫

君子好逑

import urllib.request

response = urllib.request.urlopen("https://baike.baidu.com/item/灶门祢豆子/22390246?fr=aladdin")
html = response.read()
html = html.decode("utf-8")

print(html)

有大佬能告诉我为啥会发生这个错误吗，之前输小甲鱼的网站就不会出错

最佳答案

月排行榜 / 总排行榜

zltzlt

2020-8-8 22:11:03

URL 中不能含有中文，用 quote 转化一下即可

import urllib.request
import urllib.parse

response = urllib.request.urlopen("https://" + urllib.parse.quote("baike.baidu.com/item/灶门祢豆子/22390246?fr=aladdin"))
html = response.read()
html = html.decode("utf-8")

print(html)

跳转到最佳答案楼层

永恒的蓝色梦想

改用 requests 库吧

zltzlt

URL 中不能含有中文，用 quote 转化一下即可

import urllib.request
import urllib.parse

response = urllib.request.urlopen("https://" + urllib.parse.quote("baike.baidu.com/item/灶门祢豆子/22390246?fr=aladdin"))
html = response.read()
html = html.decode("utf-8")

print(html)

君子好逑

永恒的蓝色梦想 发表于 2020-8-8 22:09
改用 requests 库吧

受教了，大佬

liuzhengyuan

君子好逑 发表于 2020-8-8 22:15
受教了，大佬

requests 真的又简洁又好用

君子好逑

永恒的蓝色梦想 发表于 2020-8-8 22:09
改用 requests 库吧

大佬，有学这个库的视频给推一个吗

liuzhengyuan

君子好逑 发表于 2020-8-8 22:19
大佬，有学这个库的视频给推一个吗

https://fishc.com.cn/forum.php?m ... peid&typeid=711（极客python爬虫教程，里面全用 requests）
以及
https://fishc.com.cn/forum.php?m ... ests%2B%CE%C4%B5%B5

君子好逑

liuzhengyuan 发表于 2020-8-8 22:28
https://fishc.com.cn/forum.php?mod=forumdisplay&fid=319&filter=typeid&typeid=711（极客python爬虫 ...

谢谢大佬

liuzhengyuan

君子好逑 发表于 2020-8-8 22:32
谢谢大佬

爬取豆瓣的好像失效了

zltzlt

就这样忽略我？

君子好逑

zltzlt 发表于 2020-8-9 08:14
就这样忽略我？

之前忙着看番忘了

君子好逑

zltzlt 发表于 2020-8-9 08:14
就这样忽略我？

给你补上了

极品召唤兽

zltzlt 发表于 2020-8-9 08:14
就这样忽略我？

hhh可能是忘了...