鱼C论坛

 找回密码
 立即注册
查看: 2321|回复: 4

爬取豆瓣TOP250图片爬取的图片不能打开

[复制链接]
发表于 2020-10-21 09:53:45 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
import requests
from lxml import etree
import os



#url
ulr = 'https://movie.douban.com/top250'
#UA伪装
headers = {
'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.75 Safari/537.36'
}
#发起请求
response = requests.get(url=ulr,headers=headers)

page_text = response.text
#数据解析
tree = etree.HTML(page_text)
li_list = tree.xpath('//ol[@class="grid_view"]/li')
#保存图片文件创建
if not os.path.exists('./doubanTOP250'):
    os.mkdir('./doubanTOP250')
#循环抓取
for li in li_list:
    movie_name = li.xpath('div/div[2]/div[@class="hd"]/a/span[1]/text()')[0]
    movie_img = li.xpath('div/div[1]/a/img/@src')[0]
    movie_data = requests.get(url=movie_img,headers=headers).content
    movie_path = 'doubanTOP250/'+movie_name
    #文件保存
    with open(movie_path,'wb') as fp:
        fp.write(movie_data)
        print(movie_name+'下载成功!!!')
屏幕截图 2020-10-21 095312.png
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-10-21 09:54:23 | 显示全部楼层
d'd
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2020-10-21 09:56:53 | 显示全部楼层
文件保存格式是什么?后缀呢?
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-10-21 10:00:05 | 显示全部楼层
疾风怪盗 发表于 2020-10-21 09:56
文件保存格式是什么?后缀呢?

可以了,谢谢大佬。这么重要的东西都搞忘了!
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-10-21 10:01:09 | 显示全部楼层
孝白歌 发表于 2020-10-21 10:00
可以了,谢谢大佬。这么重要的东西都搞忘了!

正常,这东西,是经常忘记。。。。。。。。。。
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-6-28 14:50

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表