鱼C论坛

 找回密码
 立即注册
查看: 1351|回复: 4

[已解决]贴吧爬取图片问题

[复制链接]
发表于 2020-9-1 23:19:51 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
求助,最近学到贴吧爬取图片那一课,可是我运行了完全没有打印网址,请问是因为https的问题嘛,求解 。代码如下
import urllib.request
import re


def open_url(url):
       req  = urllib.request.Request(url)
       req.add_header('user-agent','Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36')
       page = urllib.request.urlopen(req)
       html = page.read().decode('utf-8')


def get_img(html):
       p = r'<img class="BDE_Image" src="[^"]+\.jpg"'
       imglist = re.findall(p,str(html))
       for each in imglist:
              print(each)


if __name__ == '__main__':
       url = "https://tieba.baidu.com/p/6579707886"
       get_img(open_url(url))
最佳答案
2020-9-2 07:27:47
zhouleiqiang 发表于 2020-9-1 23:20
运行了完全没有反应,就是空白的,也没有报错。

import urllib.request
import re


def open_url(url):
       req  = urllib.request.Request(url)
       req.add_header('user-agent','Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36')
       page = urllib.request.urlopen(req)
       html = page.read().decode('utf-8')
       return html


def get_img(html):
       p = r'<img class="BDE_Image" src="[^"]+\.jpg"'
       imglist = re.findall(p,str(html))
       for each in imglist:
              print(each)


if __name__ == '__main__':
       url = "https://tieba.baidu.com/p/6579707886"
       get_img(open_url(url))
代码第十行,没有return返回值
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-9-1 23:20:35 | 显示全部楼层
运行了完全没有反应,就是空白的,也没有报错。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-9-1 23:23:57 | 显示全部楼层
有人吗,有人吗,小白求助
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-9-2 07:27:47 | 显示全部楼层    本楼为最佳答案   
zhouleiqiang 发表于 2020-9-1 23:20
运行了完全没有反应,就是空白的,也没有报错。

import urllib.request
import re


def open_url(url):
       req  = urllib.request.Request(url)
       req.add_header('user-agent','Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36')
       page = urllib.request.urlopen(req)
       html = page.read().decode('utf-8')
       return html


def get_img(html):
       p = r'<img class="BDE_Image" src="[^"]+\.jpg"'
       imglist = re.findall(p,str(html))
       for each in imglist:
              print(each)


if __name__ == '__main__':
       url = "https://tieba.baidu.com/p/6579707886"
       get_img(open_url(url))
代码第十行,没有return返回值
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-9-2 09:37:10 | 显示全部楼层
本帖最后由 zhouleiqiang 于 2020-9-2 09:41 编辑
1q23w31 发表于 2020-9-2 07:27
代码第十行,没有return返回值


谢谢啊,好像是我自己没写这行
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-18 20:18

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表