鱼C论坛

 找回密码
 立即注册
查看: 3381|回复: 4

请问如果网站没有post 还能爬么

[复制链接]
发表于 2020-3-5 17:00:10 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 ArmandXiao 于 2020-3-5 17:59 编辑

之前甲鱼教了一个 爬有道翻译的 我发现没有显示词性和音标
所以我像爬一下有道词典 但是我发现 根本没有post请求啊
那还能爬么
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2020-3-5 17:03:41 | 显示全部楼层
这是别人已编好的有道词典爬虫代码,分享给你:
  1. import requests
  2. import json

  3. while True:
  4.   content = input("请输入:")
  5.   if content == "":
  6.     print("欢迎下次使用")
  7.     break
  8.   headers =  {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36 SE 2.X MetaSr 1.0"

  9.   ,'i':content
  10.   ,'from':'AUTO'
  11.   ,'to':'AUTO'
  12.   ,'smartresult':'dict'
  13.   ,'client':'fanyideskweb'
  14.   ,'salt':'1514345577426'
  15.   ,'sign':'8a12c3bae1619e0d60247aa90a4d945e'
  16.   ,'doctype':'json'
  17.   ,'version':'2.1'
  18.   ,'keyfrom':'fanyi.web'
  19.   ,'action':'FY_BY_REALTIME'
  20.   ,'typoResult':'false'
  21.               }

  22.   url = 'http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&sessionFrom=null'
  23.   response = requests.get(url, params=headers)

  24.   html = response.text
  25.   target = json.loads(html)
  26.   #print(html)
  27.   print("翻译结果:")
  28.   print(target['translateResult'][0][0]['tgt'])
  29.   print()
复制代码
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-5 17:12:16 | 显示全部楼层
wuqramy 发表于 2020-3-5 17:03
这是别人已编好的有道词典爬虫代码,分享给你:

谢谢不过你这是得有网页的post请求
有道翻译有post 但是词典没有 不过我已经找到方法了~ 谢谢你
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-3-5 17:31:33 | 显示全部楼层
ArmandXiao 发表于 2020-3-5 17:12
谢谢不过你这是得有网页的post请求
有道翻译有post 但是词典没有 不过我已经找到方法了~ 谢谢你

小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-5 17:59:36 | 显示全部楼层
怎么修改为已解决呢? 或者怎么删帖子呢 我找到办法了
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2026-3-1 07:33

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表