鱼C论坛

 找回密码
 立即注册
查看: 3422|回复: 10

[已解决]明明我原封不动地把例题打下来还是会报错?

[复制链接]
发表于 2020-1-30 12:27:14 | 显示全部楼层    本楼为最佳答案   
  1. import urllib.request
  2. import urllib.parse
  3. import re
  4. from bs4 import BeautifulSoup

  5. def main():
  6.     keyword = input("请输入关键词:")
  7.     keyword = urllib.parse.urlencode({"word":keyword})

  8.     url = "http://baike.baidu.com/search/word?{0}".format(keyword)
  9.     # print('[url] --> {0}'.format(url))
  10.    
  11.     response = urllib.request.urlopen(url)
  12.     html = response.read()
  13.     soup = BeautifulSoup(html, "html.parser")

  14.     for each in soup.find_all(href=re.compile("view")):
  15.         content = ''.join([each.text])

  16.         root_url = "http://baike.baidu.com"
  17.         href_url = each["href"]        
  18.         url2 = urllib.parse.urljoin(root_url, href_url)        
  19.         # print('[url2] --> {0}'.format(url2))

  20.         url2 = urllib.parse.quote(url2, safe=':/?#&')
  21.         
  22.         response2 = urllib.request.urlopen(url2)
  23.         html2 = response2.read()
  24.         soup2 = BeautifulSoup(html2, "html.parser")
  25.         if soup2.h2:
  26.             content = ''.join([content, soup2.h2.text])

  27.         decode_url = urllib.parse.unquote(url2)
  28.         decode_url = urllib.parse.unquote(decode_url)
  29.             
  30.         content = ''.join([content, " -> ", decode_url])
  31.         print(content)

  32. if __name__ == "__main__":
  33.     main()
复制代码
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-2-4 21:31:41 From FishC Mobile | 显示全部楼层
safe参数指定的字符串中包含的字符不会被转换
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-2-6 04:36:27 | 显示全部楼层
dweiyuan 发表于 2020-2-5 17:57
谢谢。
但是?#/之类的符号不就本来就是ASCII字符吗,为什么还要把它们放在safe里?

在url中,#/ 会被编码的,
#:%2f   
/:%23

如果不想被编码,就把不想编码的字符赋給 safe
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-9-26 04:33

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表