鱼C论坛

 找回密码
 立即注册
查看: 1805|回复: 8

[已解决]关于视屏52‘论一只爬虫的自我修养’中视屏里的程序

[复制链接]
发表于 2017-5-21 16:27:18 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
在观看这一讲程序中,关于第二个程序,模拟一个有道词典的翻译程序,按照小甲鱼老师一步步操作,但是在审查元素中的 Form Data和视屏里面的有点不一样:

i:你真厉害
from:AUTO
to:AUTO
smartresult:dict
client:fanyideskweb
salt:1495354561737
sign:184324a0aab853e1a566024c7ec4af85
doctype:json
version:2.1
keyfrom:fanyi.web
action:FY_BY_CLICKBUTTON
typoResult:true


我用的是360安全浏览器8.1  ,按照上面这些内容,我将其导入data 字典中,然后运行程序,显示TypeError: can't concat bytes to str,有谁能告诉我这个问题的原因,以及解决措施么?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2017-5-21 16:30:23 | 显示全部楼层
data=urllib.parse.urlencode(data).encode('utf-8')。。。好像是少写了这一句
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2017-5-21 16:51:15 | 显示全部楼层
怎么运行后出错,我看了下target是{'errorCode': 50}
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2017-5-21 17:01:55 | 显示全部楼层
  1. import urllib.request
  2. import urllib.parse
  3. import json

  4. content = input("请输入需要翻译的内容:")

  5. url = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&smartresult=ugc&sessionFrom=http://www.youdao.com/"
  6. data = {}
  7. data['type'] = 'AUTO'
  8. data['i'] = content
  9. data['doctype'] = 'json'
  10. data['xmlVersion'] = '1.6'
  11. data['keyfrom'] = 'fanyi.web'
  12. data['ue'] = 'UTF-8'
  13. data['typoResult'] = 'true'
  14. data = urllib.parse.urlencode(data).encode('utf-8')

  15. response = urllib.request.urlopen(url, data)
  16. html = response.read().decode('utf-8')
  17. target = json.loads(html)

  18. print("翻译结果:%s" % (target['translateResult'][0][0]['tgt']))
复制代码


上面这个是小甲鱼的程序,不管输入什么都是可以实现翻译的

下面的是我的程序,不知道是不是因为浏览器的不同,审查元素有点不一样,并且data['i']只能为‘中国队加油’,如果这一句要换成其余的想翻译的句子,就会报错:
  1. import urllib.request
  2. import urllib.parse
  3. import json

  4. url='http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule&sessionFrom=null'

  5. data = {}
  6. data['i']='中国队加油'
  7. data['from']='AUTO'
  8. data['to']='AUTO'
  9. data['smartresult']='dict'
  10. data['client']='fanyideskweb'
  11. data['salt']='1495356847771'
  12. data['sign']='b1478e240487596625d19aa0e797ed2a'
  13. data['doctype']='json'
  14. data['version']='2.1'
  15. data['keyfrom']='fanyi.web'
  16. data['action']='FY_BY_CLICKBUTTON'
  17. data['typoResult']='true'
  18. data=urllib.parse.urlencode(data).encode('utf-8')

  19. response=urllib.request.urlopen(url,data)
  20. html=response.read().decode('utf-8')

  21. target = json.loads(html)
  22. print('翻译结果:%s'%(target['translateResult'][0][0]['tgt']))
复制代码
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-5-22 15:39:14 | 显示全部楼层
data['salt']='1495356847771'
data['sign']='b1478e240487596625d19aa0e797ed2a'
这两个地方应该是变动的,你复制是没用的,网页一般都是一段时间变动一次,所以你要是复制以前的代码是不行的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-6-12 15:12:52 | 显示全部楼层
楼主问题解决了么,我也遇到这样的问题,formdata显示不一样,我和小甲鱼用的一样也是谷歌浏览器但显示和你一样,
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-6-12 16:16:01 | 显示全部楼层
data显示一样不是很正常么? 哪家网站过了几年了还一成不变?
根据自己的需求找对表单进行相应的修改就行了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2017-6-14 16:45:33 | 显示全部楼层
pie-DD 发表于 2017-6-12 15:12
楼主问题解决了么,我也遇到这样的问题,formdata显示不一样,我和小甲鱼用的一样也是谷歌浏览器但显示和你 ...

可能正如楼下朋友所说的,代码发生了改变,再比如爬妹子图视屏中小甲鱼老师的程序就不一定适用,因为url地址的格式发生了改变,只能说要按照实际修改修改
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-6-14 17:04:07 | 显示全部楼层    本楼为最佳答案   
http://bbs.fishc.com/thread-88062-1-1.html

请看这个
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-5-19 19:20

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表