关于054论一只爬虫的自我修养2：实战的问题,最后打印会报错,网上搜索后尝试后仍不....

szk171848581

1. #用python模拟有道词典翻译
   
2. import urllib.request
   
3. import urllib.parse
   
4. import json
   
5. 
   
6. content = input("需要翻译的内容是:")
   
7. i =smartresult=client=salt=sign=ts=bv=doctype=version=keyfrom=action=typoResult= 0
   
8. 
   
9. 
   
10. url = "http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule"
    
11. data = {}
    
12. data[i] = content
    
13. #data[from] = 'AUTO'
    
14. #data[to]= 'AUTO'
    
15. data[smartresult]= 'dict'
    
16. data[client]= 'fanyideskweb'
    
17. data[salt]= '15547180512831'
    
18. data[sign]= '6d104f90ff7affb0bf12097b220bbe1d'
    
19. data[ts]= '1554718051283'
    
20. data[bv]= '4adace860e235c9a32a4c7ad3c1d2706'
    
21. data[doctype]= 'json'
    
22. data[version]= '2.1'
    
23. data[keyfrom]= 'fanyi.web'
    
24. data[action]= 'FY_BY_CLICKBUTTION'
    
25. data[typoResult]= 'false'
    
26. 
    
27. data = urllib.parse.urlencode(data).encode("utf-8")
    
28. response = urllib.request.urlopen(url,data)
    
29. html = response.read().decode("utf-8")
    
30. 
    
31. 
    
32. target = json.loads(html)
    
33. # print(type(target))
    
34. # for each in target:
    
35. #     print(each)
    
36. print("翻译结果是: %s" % (target['translateResult'][0][0]['tgt']))
    

复制代码

szk171848581

关于这个问题,我后来想了想,小甲鱼的视频是几年前的,可能当时用这种方法可以获取,当时技术飞速发展的今天,这种方法可能被河蟹了.... 所以我也就没怎么再纠结了,等以后学完了,回头来看,可能就很容易的解决了

小小小小的鱼丶

有道加密了。我记得这一课的视频有弹幕教学的，弹幕里有解决办法，很早之前另外一个搬运小甲鱼视频的up主，点击量很多的那个

_谪仙

url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule"

把url换掉试下

风扫地

我也遇到这个问题了：


data[salt]= '15547180512831'
data[sign]= '6d104f90ff7affb0bf12097b220bbe1d'
data[ts]= '1554718051283'
data[bv]= '4adace860e235c9a32a4c7ad3c1d2706'

这几个字段貌似有特殊含义会被校验 = =。

Ayluc

url = "http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule"
url改了就好了
url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule"
去掉了_o

风扫地

把 _o去掉。"您的请求来源非法，商业用途使用请关注有道翻译API官方网站"

cwhsmile

反爬人家是认真的

szk171848581

小小小小的鱼丶 发表于 2019-4-8 22:30
有道加密了。我记得这一课的视频有弹幕教学的，弹幕里有解决办法，很早之前另外一个搬运小甲鱼视频的up主， ...

好的,有时间会去看看

szk171848581

_谪仙 发表于 2019-4-8 22:55
url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule"

把url换掉试下

关于删掉  "_o" 的方法试过了,不行 才在论坛里提问的....

szk171848581

风扫地 发表于 2019-4-8 23:54
我也遇到这个问题了：

关于这个问题,我后来想了想,小甲鱼的视频是几年前的,可能当时用这种方法可以获取,当时技术飞速发展的今天,这种方法可能被河蟹了.... 所以我也就没怎么再纠结了,等以后学完了,回头来看,可能就很容易的解决了

szk171848581

cwhsmile 发表于 2019-4-9 09:53
反爬人家是认真的

关于这个问题,我后来想了想,小甲鱼的视频是几年前的,可能当时用这种方法可以获取,当时技术飞速发展的今天,这种方法可能被河蟹了.... 所以我也就没怎么再纠结了,等以后学完了,回头来看,可能就很容易的解决了

szk171848581

风扫地 发表于 2019-4-9 09:02
把 _o去掉。"您的请求来源非法，商业用途使用请关注有道翻译API官方网站"

关于删掉  "_o" 的方法试过了,不行 才在论坛里提问的....

cwhsmile

szk171848581 发表于 2019-4-10 15:53
关于这个问题,我后来想了想,小甲鱼的视频是几年前的,可能当时用这种方法可以获取,当时技术飞速发展的今天 ...

嗯嗯，是的 。
我这两天也再研究为啥requests.get返回的和审查元素看到的不一样，
一点一点的百度才知道有些内容是经过JavaScript渲染的，需要借助别的工具才能爬取到自己想要的内容。

Stubborn

加密了，论坛里面有说的，你参考下这个帖子：有道爬虫

_谪仙

_谪仙 发表于 2019-4-8 22:55
url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule"

把url换掉试下

1. import requests,json
   
2. from  urllib.parse import urlencode
   
3. 
   
4. url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule"
   
5. 
   
6. text = input("请输入要翻译的英文:")
   
7. headers = {
   
8.         "X-Requested-With": "XMLHttpRequest",
   
9.         "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36",
   
10.         "Content-Type": "application/x-www-form-urlencoded; charset=UTF-8",
    
11.                 "Referer":"http://fanyi.youdao.com/",
    
12. }
    
13. 
    
14. formdata = {'i': text,
    
15.                         'from': 'AUTO',
    
16.                         'to': 'AUTO',
    
17.                         'smartresult': 'dict',
    
18.                         'client': 'fanyideskweb',
    
19.                         'salt': '1529504879909',
    
20.                         'sign': '2e99f1f23b75300e3160607cdc8ac4c4',
    
21.                         'doctype': 'json',
    
22.                         'keyfrom': 'fanyi.web',        }
    
23. 
    
24. data = urlencode(formdata)
    
25. response = requests.post(url, data=data, headers=headers)
    
26. content = response.text
    
27. content = json.loads(content)
    
28. translateResult = content.get('translateResult')[0][0].get('tgt')
    
29. print('翻译后的字符：', translateResult)

复制代码