[已解决]急！想爬有道词典一直失败

尽余欢xhc

我在做小甲鱼老师在14章的例子：利用有道词典来翻译文本，却一直失败，花了很长时间没有搞清楚原因。
代码已附

1. import urllib.request
   
2. import urllib.parse
   
3. import json
   
4. 
   
5. content = input('请输入需要翻译的内容:')
   
6. url = ("http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=https://www.baidu.com/link")
   
7. head = {}
   
8. head['Referer'] = 'http://fanyi.youdao.com'
   
9. head['User-Agent'] = 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36'
   
10. data = {}
    
11. data['i'] = content
    
12. data['from'] = 'AUTO'
    
13. data['to'] = 'AUTO'
    
14. data['smartresult'] = 'dict'
    
15. data['client'] = 'fanyideskweb'
    
16. data['salt'] = '1500905968164'
    
17. data['sign'] = '27835850cdbe839dcb252526f3d6ac0b'
    
18. data['doctype'] = 'json'
    
19. data['version'] = '2.1'
    
20. data['keyfrom'] = 'fanyi.web'
    
21. data['action'] = 'FY_BY_CL1CKBUTTON'
    
22. data['typoResult'] = 'true'
    
23. data = urllib.parse.urlencode(data).encode('utf-8')
    
24. 
    
25. req = urllib.request.Request(url, data, head)
    
26. response = urllib.request.urlopen(req)
    
27. html = response.read().decode('utf-8')
    
28. target = json.loads(html)
    
29. print('翻译结果： %s' % (target['translateResult'][0][0]['tgt']))
    

复制代码

，希望各位能看看问题在哪。
刚开始没有修改User-agent也不行，错误信息如图，修改前后都是KeyError: 'translateResult'。

最佳答案

月排行榜 / 总排行榜

flyblood

2017-7-25 10:13:27

有道网站和之前的小甲鱼老师说的页面源码上不同，所传的参数data也不一样了。多了一些校验的参数，就像你写的
data['salt'] = '1500905968164'
data['sign'] = '27835850cdbe839dcb252526f3d6ac0b'
我也试着抓过，抓不了，是有的data参数会每次更新的，没法用爬虫去抓。
可以试着用scrapy试试看。

跳转到最佳答案楼层

yongxi

keyError 的意思就是 没有一个叫'translateResult'的键

小甲鱼老师的视频是2年前录制的，有道翻译网站早就改过了

不要照搬视频里面的例子，学会了原理，自己去重新写代码。

当时就吓傻了

楼上说的对，过了两年多，网站已经变了，知道原理改改就行了，话说你把url中http://fanyi.youdao.com/translate_o?的 _o? 去掉，不然会出错

flyblood

有道网站和之前的小甲鱼老师说的页面源码上不同，所传的参数data也不一样了。多了一些校验的参数，就像你写的
data['salt'] = '1500905968164'
data['sign'] = '27835850cdbe839dcb252526f3d6ac0b'
我也试着抓过，抓不了，是有的data参数会每次更新的，没法用爬虫去抓。
可以试着用scrapy试试看。

ooxx7788

http://bbs.fishc.com/thread-88062-1-1.html

看这贴

zhiyuzhishan

多谢 提问也在关注此问题