鱼C论坛

 找回密码
 立即注册
查看: 2371|回复: 2

请问关于python3 urllib修改ua的问题

[复制链接]
发表于 2016-12-12 16:24:19 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
新手刚学爬虫 遇到改ua问题

import urllib.request,urllib.parse
url='http://www.youku.com'
req=urllib.request.Request(url)
respon=urllib.request.urlopen(url)
html=respon.read().decode()
print(html)

这样可以抓到优酷首页的源码
但是当我修改了ua后:

import urllib.request,urllib.parse
url='http://www.youku.com'
req=urllib.request.Request(url)
req.add_header('User-Agent','Mozilla/5.0 (iPhone; U; CPU iPhone OS 4_3_3 like Mac OS X; en-us) AppleWebKit/533.17.9 (KHTML, like Gecko) Version/5.0.2 Mobile/8J2 Safari/6533.18.5')
respon=urllib.request.urlopen(url)
html=respon.read().decode()
print(html)
请问为什么不能抓到优酷移动版的源码
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2016-12-12 16:44:35 | 显示全部楼层
respon=urllib.request.urlopen(url)

改成

respon=urllib.request.urlopen(req)
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-12-12 16:56:52 | 显示全部楼层

感谢回答 原来太粗心了
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2026-2-24 11:43

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表