鱼C论坛

 找回密码
 立即注册
查看: 2236|回复: 9

爬取一个豆瓣电影排行版的动态网页,我第一步的html就打印失败是什么情况

[复制链接]
发表于 2019-11-9 15:57:49 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
import requests

url='https://movie.douban.com/j/chart/top_list?'
headers={'User-Agent': 'Mozilla/5.0'}
params={'type':'11',
         'interval_id':'100:90',
         'action':'',
         'start':'0',
         'limit':'2'
        }
res=requests.get(url,params=params,headers=headers)
res.encoding='utf-8'
html=res.text
print(html)
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2019-11-9 15:59:37 | 显示全部楼层
我运行没问题,把你报的错误贴出来。
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-11-9 16:07:08 | 显示全部楼层
zltzlt 发表于 2019-11-9 15:59
我运行没问题,把你报的错误贴出来。

我的错误好长:requests.exceptions.SSLError: HTTPSConnectionPool(host='movie.douban.com', port=443): Max retries exceeded with url: /j/chart/top_list?type=11&interval_id=100%3A90&action=&start=0&limit=2 (Caused by SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate (_ssl.c:1076)')))
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-11-9 16:17:27 | 显示全部楼层
requests.exceptions.SSLError:HTTPSConnectionPool(host ='movie.douban.com',port = 443):URL超过最大重试次数:/ j / chart / top_list?type = 11&interval_id = 100%3A90&action =&start = 0&limit = 1( 由SSLError(SSLCertVerificationError(1,'[SSL:CERTIFICATE_VERIFY_FAILED]证书验证失败:无法获取本地发行者证书(_ssl.c:1076)')引起)))
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-11-9 16:58:48 | 显示全部楼层
SSL就是HTTPS的S(Hyper Text Transfer Protocol over SecureSocket Layer),要求验证证书了。
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-11-9 19:56:14 | 显示全部楼层
geen 发表于 2019-11-9 16:58
SSL就是HTTPS的S(Hyper Text Transfer Protocol over SecureSocket Layer),要求验证证书了。

那咋办呢,其他人好像都可以运行
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-11-9 20:40:14 | 显示全部楼层
奇怪,为什么我复制你的url打开啥也没有
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-11-10 08:58:48 | 显示全部楼层
5281 发表于 2019-11-9 20:40
奇怪,为什么我复制你的url打开啥也没有

需要传参params
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-11-10 09:11:58 | 显示全部楼层
本帖最后由 geen 于 2019-11-10 09:17 编辑
tt520 发表于 2019-11-9 19:56
那咋办呢,其他人好像都可以运行


你的是python几?有没开代理?我运行过了也没问题,建议试下重装 requests 。
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-11-10 10:24:12 | 显示全部楼层
tt520 发表于 2019-11-9 19:56
那咋办呢,其他人好像都可以运行

你把url里面https改成http
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-12-6 09:56

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表