爬虫豆瓣客户端登陆求助

ChuckCheng

课后作业：54讲写一个登录豆瓣的客户端。

小甲鱼的答案中涉及到验证码，但是现在豆瓣网登陆不需要验证码，输入密码和账号后直接登陆跳转的登录成功的页面

因为太多知识没学过，自己查资料搞的，有些东西可能理解不到位，下面是我自己写的：
from urllib import request, parse
from http import cookiejar

# 创建cookiejar实例对象
cookie=cookiejar.CookieJar()


cookie_handle=request.HTTPCookieProcessor(cookie)
http_handle=request.HTTPHandler()
https_handle=request.HTTPSHandler()
opener=request.build_opener(cookie_handle,https_handle,http_handle)
opener.addheaders=[('User-Agent','Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36')]

def login():
    url='https://accounts.douban.com/passport/login'
    data={'from_email':'xxxxx',
        'from_password':'xxxxx,'source':'index_nav'}
    data = parse.urlencode(data).encode('utf-8')
    req = request.Request(url,data=data)
    resp=opener.open(req)   ##我理解为页面自动跳转
    feed=resp.read().decode()     
    print(resp.geturl())
    print(feed)

if __name__ == '__main__':
    login()

我的理解是：豆瓣既然输入密码和账号后自动跳转，反馈得到的resp就应该是登录成功后的页面，但是程序显示的还是登录界面
请问，我是哪里理解错了，需要添加那些东西，能否帮忙修改一下代码，谢谢！！！
PS:xxxx是我的账号和密码

XiaoPaiShen

用 requests 模块，其中有session可以传入用户名和密码，用来授权和验证

1. import requests
   
2. 
   
3. def main():
   
4.   url_basic = 'https://accounts.douban.com/j/mobile/login/basic'
   
5.   url = 'https://www.douban.com/'
   
6.   ua_headers = { "User-Agent":'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.0; Trident/4.0)'}
   
7.   data = {
   
8.     'ck': '',
   
9.     'name': 'xxxxx',
   
10.     'password': 'xxxxx',
    
11.     'remember': 'false',
    
12.     'ticket': ''
    
13.   }
    
14. 
    
15.   s = requests.session()
    
16.   s.post(url=url_basic, headers=ua_headers, data=data)
    
17.   response = s.get(url=url, headers=ua_headers)
    
18.   with open('douban.html' , 'wb') as f:
    
19.     f.write(response.content)
    
20. 
    
21. if __name__ == '__main__':
    
22.   main()

复制代码

ChuckCheng

XiaoPaiShen 发表于 2019-10-28 11:19
用 requests 模块，其中有session可以传入用户名和密码，用来授权和验证

非常感谢，学习到了···

ChuckCheng

XiaoPaiShen 发表于 2019-10-28 11:19
用 requests 模块，其中有session可以传入用户名和密码，用来授权和验证

请问，为甚么你用的是这个地址https://accounts.douban.com/j/mobile/login/basic， 这个地址在网页是打不开的啊，你是哪里获取的。另外为什么我直接用https://accounts.douban.com/passport/login这个登录网址不行，得到的还是原网址不会直接跳转？？
谢谢~~

XiaoPaiShen

ChuckCheng 发表于 2019-10-29 16:21
请问，为甚么你用的是这个地址https://accounts.douban.com/j/mobile/login/basic， 这个地址在网页是打 ...

我费劲巴拉的写了那么多，回帖奖励也没得着...你好歹给打个赏，我也好有积极性。
这个网址是要用post方法访问，返回json数据。

Jery_wang09

想赚点鱼币，来晚了

南波万小闹

我就是来确定下豆瓣是不是不用验证码了

客官这边请

目前可以使用手机号码、第三方帐号（微信、微博）登录注册，不支持邮箱注册。
过去使用邮箱注册的用户，仍然可以正常登录，但我们建议绑定手机号码，会使登录更便捷，也有助于帐号安全。

手机注册的是不是可以放弃了

荣耀

围观学习，简洁的代码

小鞋森233

可能没跳转

qiuyouzhi

来看下顺便蹭鱼币~~

容斋五笔

为啥上面那个大佬的代码cookjar都没有载入啊是让我们自己载入吗