鱼C论坛

 找回密码
 立即注册
查看: 1545|回复: 1

selenium爬取微博数据

[复制链接]
发表于 2020-8-2 20:10:47 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
在第一步就卡死,有没有大佬解释一下为啥我请求的网址无论是我的微博主页还是什么,selenium出来的都是微博登录页
from selenium import webdriver
import time
import json

# url='https://weibo.com/6615032383/profile?rightmod=1&wvr=6&mod=personinfo&is_all=1'

# 从文件读取cookies
with open('weibo_cookies.txt','r',encoding='utf8') as f:
    cookie=json.loads(f.read())
print(type(cookie))
print(cookie)
try:
    options = webdriver.ChromeOptions()
    options.add_experimental_option('excludeSwitches', ['enable-automation'])
    browser=webdriver.Chrome()
    browser.get('https://weibo.com')
    browser.delete_all_cookies()
    browser.add_cookie(cookie)
except Exception as e:
    print(e)



而且利用没有过期的cookies也还是在未登录页
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-8-2 21:22:06 | 显示全部楼层
第一次get没有cookie,之后add了cookie,但没有get。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-19 14:33

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表