|
|
马上注册,结交更多好友,享用更多功能^_^
您需要 登录 才可以下载或查看,没有账号?立即注册
x
今天看了一天小鱼儿的教程正准备着手写个爬虫试试但是问题出现了。一开始还行但是运行几分钟发现读不了数据
但直接浏览可以打开。就是用软件运行就出不了数据
headers = {'Accept': 'text/html, application/xhtml+xml, */*',
'Accept-Encoding': 'gzip, deflate, compress',
'Accept-Language': 'en-us;q=0.5,en;q=0.3',
'Cache-Control': 'max-age=0',
'Connection': 'keep-alive',
'User-Agent': 'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:22.0) Gecko/20100101 Firefox/22.0',
'Referer':'http://weixin.sogou.com',
'X-Forwarded-For':'202.108.22.5'}
coo = requests.get('http://weixin.sogou.com',headers=headers)
r = requests.get('http://weixin.sogou.com/weixin?query=site%3Amp.weixin.qq.com&type=1&page=3&ie=utf8&p=40040100&dp=1&w=01019900&dr=1', headers=headers,cookies=coo.cookies)
print(r.text)
print r.headers
各种办法都不行了。修改header也不可以。不知道哪问题求助一下
|
|