鱼C论坛

 找回密码
 立即注册
查看: 1163|回复: 3

[已解决]遇到了418问题,求助!

[复制链接]
发表于 2020-5-21 23:03:07 | 显示全部楼层 |阅读模式
3鱼币
在做53讲作业时,最后一题复制了小甲鱼的代码,运行了一次遇到418错误,之后添加user-agent还是会报418错误,求大佬指点
  1. import urllib.request
  2. import chardet


  3. head = {'User - Agent': 'Mozilla / 5.0(WindowsNT10.0;Win64;x64) AppleWebKit / 537.36(KHTML, likeGecko) Chrome / '
  4.                            '80.0.3987.116Safari / 537.36'}


  5. def main():
  6.     i = 0

  7.     with open("urls.txt", "r") as f:
  8.         # 读取待访问的网址
  9.         # 由于urls.txt每一行一个URL
  10.         # 所以按换行符'\n'分割
  11.         urls = f.read().splitlines()

  12.     for each_url in urls:
  13.         rep = urllib.request.Request(each_url, headers=head)
  14.         response = urllib.request.urlopen(rep)
  15.         html = response.read()

  16.         # 识别网页编码
  17.         encode = chardet.detect(html)['encoding']
  18.         if encode == 'GB2312':
  19.             encode = 'GBK'

  20.         i += 1
  21.         filename = "url_%d.txt" % i

  22.         with open(filename, "w", encoding=encode) as each_file:
  23.             each_file.write(html.decode(encode, "ignore"))


  24. if __name__ == "__main__":
  25.     main()
复制代码
最佳答案
2020-5-21 23:03:08
把UA头里面两个空格去了
  1. head = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'}
复制代码

最佳答案

查看完整内容

把UA头里面两个空格去了
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2020-5-21 23:03:08 | 显示全部楼层    本楼为最佳答案   
把UA头里面两个空格去了
  1. head = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'}
复制代码

小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-5-21 23:18:12 | 显示全部楼层
Twilight6 发表于 2020-5-21 23:03
把UA头里面两个空格去了

感谢感谢
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2020-5-21 23:18:53 | 显示全部楼层

没事 欢迎继续来论坛问,多问多进步~
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-6-20 00:43

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表