鱼C论坛

 找回密码
 立即注册
查看: 2845|回复: 4

Python爬虫做有道翻译时报错 求帮忙

[复制链接]
发表于 2017-6-25 13:36:28 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
import urllib.request as request
import urllib.parse as parse

url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=https://www.baidu.com/link';

head = {}
head['User-Agent'] = 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.86 Safari/537.36'

data = {}
data['i'] = 'fish'
data['from'] = 'AUTO'
data['to'] ='AUTO'
data['smartresult'] = 'dict'
data['client'] = 'fanyideskweb'
data['salt'] = '1498366323659'
data['sign'] = '5aeaa351d3d7d7a7d9e323a2be47393c'
data['doctype'] = 'json'
data['version'] = '2.1'
data['keyfrom'] = 'fanyi.web'
data['action'] = 'FY_BY_CLICKBUTTON'
data['typoResult'] = 'true'
data = parse.urlencode(data).encode('utf-8')

req = request.Request(url,data,head)
#req.add_header('User-Agent','Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.86 Safari/537.36')

response = request.urlopen(req)
html = response.read().decode('utf-8')

print(html)
运行结果:{"errorCode":50}。。。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-6-25 16:47:11 | 显示全部楼层
本帖最后由 和vvv 于 2017-6-25 16:59 编辑
url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=https://www.baidu.com/link';
多了一个分号
去了之后,还是不行。只有,重新抓包分析。POST的url有问题
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2017-6-25 18:00:33 | 显示全部楼层
和vvv 发表于 2017-6-25 16:47
多了一个分号
去了之后,还是不行。只有,重新抓包分析。POST的url有问题

谢谢。但是去了还是不行,在望山上检查里面的url就提示错误代码50.
然后用小甲鱼视频上的url就行。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-6-25 18:49:03 | 显示全部楼层
这个问题的详解请看这个,不明白的话可以再说:
http://bbs.fishc.com/thread-89642-1-1.html
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-6-25 23:02:44 | 显示全部楼层
url要换成这个
http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&smartresult=ugc&sessionFrom=null

我估计可能是有道翻译被太多爬虫爬了,导致服务器压力太大,所以在网页中重新写了个接口,这个接口应该是对爬虫有检测和限制的,所以就有error了,但是原来的那个网址又没给封掉,所以还能接着用。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-2-21 04:25

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表