关于爬取知乎follower的403问题

kunkun_1230

最近，看完小甲鱼的python教学视频后，准备爬取一下知乎上自己的关注者，并计划拿到数据之后，做一个画像，看一下关注我的都是什么样的人。

根据网上已经有的代码，外加自己编辑的代码，现在可以成功登陆知乎，并且可以顺利的返回xsrf数据了。

但是获得个人主页的时候，还是返回了403，信息错误的问题，一直没有得到个人主页的详细信息（获取个人主页的代码如下）。

1. #------------------------------------这是获取数据的代码-----------------------
   
2. def getdetail():
   
3.     follower_url='https://www.zhihu.com/people/kunkun_1230/followers'
   
4.     follower_headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:55.0) Gecko/20100101 Firefox/55.0',
   
5.         'Referer': 'https://www.zhihu.com/people/kunkun_1230/followers',
   
6.         'Origin': 'https://www.zhihu.com',
   
7.         'Accept-Encoding': 'gzip, deflate, br',
   
8.         'Accept': '*/*'}
   
9.     m_data={'_xsrf':str(get_xsrf())}
   
10.     result = session.post(follower_url, data=m_data, headers=follower_headers)
    
11.     soup=bs(result.content,'lxml')
    
12.     with open('soup','w',encoding='utf-8') as f:
    
13.         f.write(str(soup))

复制代码

全部的代码见链接zhihu_login_get follower.py
（https://github.com/kunkun1230/Python-/tree/master/%E7%99%BB%E5%BD%95%E7%9F%A5%E4%B9%8E）

这个问题困扰我好久了，请各位大神帮忙看一下，问题出在什么地方，并帮忙改正一下。万分感谢！！！！

kunkun_1230

自己顶一下，求大神解答

新手·ing

你被403forbidden拒绝访问了。
试试使用代理IP吧。

kunkun_1230

新手·ing 发表于 2017-10-9 21:43
你被403forbidden拒绝访问了。
试试使用代理IP吧。

额，新人不懂啊，能不能详细说明一下？

新手·ing

kunkun_1230 发表于 2017-10-9 21:44
额，新人不懂啊，能不能详细说明一下？

403是服务器状态码。表示服务器拒绝了你的请求。
说明知乎把你认出来了，你那个浏览器伪装不管用了。
所以要继续伪装。
1.使用代理IP。
2.换其他的浏览器伪装。

purplenight

好像urllib列表填充请求头，会出现乱序，导致不该发生错误。

不妨print（请求、服务器回送头部 + 数据）