鱼C论坛

 找回密码
 立即注册
查看: 944|回复: 3

[已解决]python爬虫问题登录豆瓣客户端

[复制链接]
发表于 2020-3-31 18:22:42 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
import re
import urllib.request
from http.cookiejar import CookieJar

loginurl = "https://www.douban.com/accounts/login"
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0;WOW64;rv:23.0) Gecko/20100101 Firefox/74.0'}

cookie = CookieJar()

opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor)

data = {
    "form_email":"your email",
    "form_possword":"your password",
    "source":"index_nav"
}

data = {}
data['form_email'] = '你的账号'
data['form_password'] = '你的密码'
data['source'] = 'index_nav'
       
response = opener.open(loginurl, urllib.parse.urlencode(data).encode('utf-8'))
       
#验证成功跳转至登录页
if response.geturl() == "https://www.douban.com/accounts/login":
    html = response.read().decode()

    imgurl = re.search('<img id="captcha_image" src="(.+?)" alt="captcha" class="captcha_image"/>', html)
    if imgurl:
        url = imgurl.group(1)

        res = urllib.request.urlretrieve(url, 'v.jpg')
       

        captcha = re.search('<input type="hidden" name="captcha-id" value="(.+?)"/>' ,html)
        if captcha:
            vcode = input('请输入图片上的验证码:')
            data["captcha-solution"] = vcode
            data["captcha-id"] = captcha.group(1)
            data["user_login"] = "登录"


            response = opener.open(loginurl, urllib.parse.urlencode(data).encode('utf-8'))


            if response.geturl() == "http://www.douban.com/":
                print('登陆成功!')
-----------------------------------------------------------------------------------------------------错误----------------------------------------------------------------------------------------
Traceback (most recent call last):
  File "C:\Users\Administrator\AppData\Local\Programs\Python\Python38\豆瓣登录.py", line 23, in <module>
    response = opener.open(loginurl, urllib.parse.urlencode(data).encode('utf-8'))
  File "C:\Users\Administrator\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 531, in open
    response = meth(req, response)
  File "C:\Users\Administrator\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 640, in http_response
    response = self.parent.error(
  File "C:\Users\Administrator\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 569, in error
    return self._call_chain(*args)
  File "C:\Users\Administrator\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 502, in _call_chain
    result = func(*args)
  File "C:\Users\Administrator\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 649, in http_error_default
    raise HTTPError(req.full_url, code, msg, hdrs, fp)
urllib.error.HTTPError: HTTP Error 418:
这个错误我在网上查了试了好多方法也没有解决 大神帮帮忙
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-3-31 18:25:52 | 显示全部楼层
加上headers
这个肯定可以百度到
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-31 19:39:22 | 显示全部楼层
qiuyouzhi 发表于 2020-3-31 18:25
加上headers
这个肯定可以百度到

我加了。。。上面代码就是加了的。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-3-31 20:15:47 | 显示全部楼层    本楼为最佳答案   
可以参考这里的代码:https://github.com/CharlesPikachu/DecryptLogin
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-11-25 17:57

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表