54课问题求助

snakeshe

1. import urllib.request
   
2. import urllib.parse
   
3. url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=null'
   
4. data = {}
   
5. data['from'] = 'AUTO'
   
6. data['to'] = 'AUTO'
   
7. data['i'] = 'I love Fish.C!'
   
8. data['client'] = 'fanyideskweb'
   
9. data['salt'] = '1493967358817'
   
10. data['sigh'] = '289c597a1678f15400544bae6132a49d'
    
11. data['doctype'] = 'json'
    
12. data['version'] = '2.1'
    
13. data['keyfrom'] = 'fanyi.web'
    
14. data['ue'] = 'UTF-8'
    
15. data['typoResult'] = 'true'
    
16. data = urllib.parse.urlencode(data).encode('utf-8')
    
17. response = urllib.request.urlopen(url , data)
    
18. html = response.read().decode('utf-8')
    
19. print(html)
    

复制代码

出现的结果为>>>
{"errorCode":50}
>>>  附件是我用Google浏览器出现的结果

新房客

有道好像有反爬虫机制，需要加上headers属性伪装成浏览器

snakeshe

新房客 发表于 2017-5-5 17:45
有道好像有反爬虫机制，需要加上headers属性伪装成浏览器

这。。。好吧 谢谢你

snakeshe

新房客 发表于 2017-5-5 17:45
有道好像有反爬虫机制，需要加上headers属性伪装成浏览器

我重新改了下代码 还是不行啊

1. import urllib.request
   
2. import urllib.parse
   
3. url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=null'
   
4. 
   
5. head = {}
   
6. head['User-Agent'] = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.106 Safari/537.36'
   
7. 
   
8. data = {}
   
9. data['from'] = 'AUTO'
   
10. data['to'] = 'AUTO'
    
11. data['i'] = 'I love Fish.C!'
    
12. data['client'] = 'fanyideskweb'
    
13. data['salt'] = '1493967358817'
    
14. data['sigh'] = '289c597a1678f15400544bae6132a49d'
    
15. data['doctype'] = 'json'
    
16. data['version'] = '2.1'
    
17. data['keyfrom'] = 'fanyi.web'
    
18. data['ue'] = 'UTF-8'
    
19. data['typoResult'] = 'true'
    
20. data = urllib.parse.urlencode(data).encode('utf-8')
    
21. response = urllib.request.urlopen(url , data)
    
22. html = response.read().decode('utf-8')
    
23. print(html)
    

复制代码

ooxx7788

snakeshe 发表于 2017-5-5 19:30
我重新改了下代码 还是不行啊

1. import urllib.request
   
2. import urllib.parse
   
3. import json
   
4. 
   
5. while True:
   
6.     content = input("请输入需要翻译的内容：")
   
7.     if content == 'q!':
   
8.         print('程序结束！')
   
9.         break
   
10.     url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&smartresult=ugc&sessionFrom=dict2.index"
    
11.     head = {}
    
12.     head['Referer'] = 'http://fanyi.youdao.com'
    
13.     head[
    
14.         'User-Agent'] = 'Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36'
    
15.     data = {}
    
16.     data['type'] = 'AUTO'
    
17.     data['i'] = content
    
18.     data['doctype'] = 'json'
    
19.     data['xmlVersion'] = '1.8'
    
20.     data['keyform'] = 'fanyi.web'
    
21.     data['ue'] = 'UTF-8'
    
22.     data['typoResult'] = 'ture'
    
23.     data = urllib.parse.urlencode(data).encode('utf-8')
    
24. 
    
25.     req = urllib.request.Request(url, data, head)
    
26.     # print(type(req))
    
27.     response = urllib.request.urlopen(req)
    
28.     # print(type(response))
    
29.     html = response.read().decode('utf-8')
    
30.     target = json.loads(html)
    
31.     print("%s \n翻译结果：\n%s" % (content, target['translateResult'][0][0]['tgt']))

复制代码

我记得小甲鱼直接有这个代码吧，为什么你们要加盐呢？

新房客

snakeshe 发表于 2017-5-5 19:30
我重新改了下代码 还是不行啊

这个版本salt和sigh是动态的，类似于cookie，当次有效。不能用这种方法爬

Leopoldfire

我是遇到这个问题，还打算发帖求助，看来现在是不用了。难道是有道反爬?

新房客

ooxx7788 发表于 2017-5-5 20:14
我记得小甲鱼直接有这个代码吧，为什么你们要加盐呢？

http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=null

不知道为什么，网址去掉红色的部分就成了。有红色部分的网址打开是一个json文件。但是request url又是这个

寻找最初的自己

新房客 发表于 2017-5-5 21:59
http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=null

不知道为 ...

大神啊，我的有道翻译问题解决了，就是因为这个'_o'。