[已解决]爬虫的一个小问题

RIXO

我想把百度翻译的翻译答案搞出来，不过有点问题就是，按照视频的方法输代码，最后给了我一个
{"error":997,"from":"en","to":"zh","query":"query"}
这样的字典，求问如何破！代码如下

1. import urllib.request
   
2. import urllib.parse
   
3. 
   
4. url = 'https://fanyi.baidu.com/v2transapi'
   
5. data = {'from': 'en' ,\
   
6.         'to': 'zh' ,\
   
7.         'query': 'query' ,\
   
8.         'transtype': 'realtime' ,\
   
9.         'simple_means_flag': '3' ,\
   
10.         'sign': '851680.531921' ,\
    
11.         'token': 'e712095b913cfa27025e54b27b38b2a7'}
    
12. 
    
13. data = urllib.parse.urlencode(data).encode('utf-8')
    
14. response = urllib.request.urlopen(url,data)
    
15. html = response.read().decode('utf-8')
    
16. 
    
17. 
    
18. print(html)
    

复制代码

最佳答案

月排行榜 / 总排行榜

waitforlove

2018-9-19 21:45:02

RIXO 发表于 2018-9-19 20:27
怎么获取token啊

我看了下,请求需要带cookies ,火狐浏览器重新发送请求头,把第一个cookies删除就无法请求成功,问题就在那个cook上

跳转到最佳答案楼层

塔利班

你直接浏览器点都是这样的，换个翻译地址吧

waitforlove

'token': 'e712095b913cfa27025e54b27b38b2a7'   token这个要先获取一下,不是固定的,在原始网站上 ,差不多是验证你身份的东西

RIXO

塔利班 发表于 2018-9-19 20:10
你直接浏览器点都是这样的，换个翻译地址吧

。。。。。。。。你从元素审查找出来的网址肯定是啥也没传啊，返回正常网页才奇怪吧！！！

RIXO

塔利班 发表于 2018-9-19 20:10
你直接浏览器点都是这样的，换个翻译地址吧

最烦躁的是，我刚刚用有道的试了一下，结果返回{"errorCode":50}

塔利班

有道那个URL把 _o 去掉就OK了

RIXO

塔利班 发表于 2018-9-19 20:20
有道那个URL把 _o 去掉就OK了

有道的为什么要去掉_o啊，原理是啥

塔利班

先人的经验，鱼C祖传的

RIXO

waitforlove 发表于 2018-9-19 20:14
'token': 'e712095b913cfa27025e54b27b38b2a7'   token这个要先获取一下,不是固定的,在原始网站上 ,差不多 ...

怎么获取token啊

RIXO

塔利班 发表于 2018-9-19 20:24
先人的经验，鱼C祖传的

好想打你怎么办

waitforlove

RIXO 发表于 2018-9-19 20:27
怎么获取token啊

我看了下,请求需要带cookies ,火狐浏览器重新发送请求头,把第一个cookies删除就无法请求成功,问题就在那个cook上

waitforlove

waitforlove 发表于 2018-9-19 21:45
我看了下,请求需要带cookies ,火狐浏览器重新发送请求头,把第一个cookies删除就无法请求成功,问题就在那 ...

百度的这个cookies好像加密了,网页中并没要找到数据,token到是能找到

RIXO

waitforlove 发表于 2018-9-19 22:13
百度的这个cookies好像加密了,网页中并没要找到数据,token到是能找到

好吧，谢谢了，待我变厉害之后我再来解决它

waitforlove

RIXO 发表于 2018-9-19 22:17
好吧，谢谢了，待我变厉害之后我再来解决它

兄弟我已经帮你解决,原来那个cookies在百度首页,www.baudi.com ,上个厕所来写代码给你

RIXO

waitforlove 发表于 2018-9-19 22:34
兄弟我已经帮你解决,原来那个cookies在百度首页,www.baudi.com ,上个厕所来写代码给你

我觉得你讲下找的思路比代码重要！！！

waitforlove

RIXO 发表于 2018-9-19 22:51
我觉得你讲下找的思路比代码重要！！！

建议使用火狐浏览器,因为可以自己定义请求头发送

waitforlove

waitforlove 发表于 2018-9-19 23:08
建议使用火狐浏览器,因为可以自己定义请求头发送

1. import requests
   
2. data = {'kw':'I love you'}#这里是要翻译的内容
   
3. headers={
   
4.         'Host':'fanyi.baidu.com',
   
5.         'User-Agent':'Mozilla/5.0 (Windows NT 6.1; rv:61.0) Gecko/20100101 Firefox/61.0',
   
6.         'Content-Type':'application/x-www-form-urlencoded; charset=UTF-8',}
   
7. shuju = requests.post(url='https://fanyi.baidu.com/sug',data=data,headers=headers).json()
   
8. for i in shuju['data']:
   
9.         print(i)

复制代码

你的那个请求地址踢麻烦了,那个sign的值我这么都找不出来,请求这个地址超级方便