鱼C论坛

 找回密码
 立即注册
查看: 345|回复: 6

爬取百度贴吧图片的时候没反应 也没有错误提示 求大神帮忙

[复制链接]
发表于 2018-9-4 23:52:54 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
QQ图片20180904235058.png
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2018-9-4 23:57:39 From FishC Mobile | 显示全部楼层
贴代码出来。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-9-4 23:58:28 From FishC Mobile | 显示全部楼层
应该是正则错了,
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-9-5 00:00:11 | 显示全部楼层
import urllib.request
import re

def open_url(url):
    req=urllib.request.Request(url)
    req.add_header("User-Agent","Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36 SE 2.X MetaSr 1.0")
    response=urllib.request.urlopen(req)
    html=response.read().decode('utf-8')
   
    return html

def get_img(html):
    p=r'<img class="BDE_Image" src="([^"]+\.jpg)"'
    imglist=re.findall(p,html)
    """
    for each in imglist:
        print(each)
    """
    for each in imglist:
        filaname=each.split("/")[-1]
        urllib.request.urlretrieve(each,filename,None)

if "__name__"=="__main__":
    url='https://tieba.baidu.com/p/3371691155'
    get_img(open_url(url))
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-9-5 00:02:28 | 显示全部楼层
import urllib.request
import re

def open_url(url):
    req=urllib.request.Request(url)
    req.add_header("User-Agent","Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36 SE 2.X MetaSr 1.0")
    response=urllib.request.urlopen(req)
    html=response.read().decode('utf-8')
   
    return html

def get_img(html):
    p=r'<img class="BDE_Image" src="([^"]+\.jpg)"'
    imglist=re.findall(p,html)
    """
    for each in imglist:
        print(each)
    """
    for each in imglist:
        filename=each.split("/")[-1]
        urllib.request.urlretrieve(each,filename,None)

if __name__=="__main__":
    url='https://tieba.baidu.com/p/3371691155'
    get_img(open_url(url))
   
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-9-5 00:03:45 | 显示全部楼层
拉了盏灯 发表于 2018-9-4 23:58
应该是正则错了,

找到错误了   __name_加了双引号   filename也有一个拼写错误     太粗心了_
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-9-5 00:04:59 From FishC Mobile | 显示全部楼层
邓文龙 发表于 2018-9-5 00:03
找到错误了   __name_加了双引号   filename也有一个拼写错误     太粗心了_

找到了就好,
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-10-6 22:24

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表