[已解决]第56讲关于爬图片

messi_xiong

我参照讲课写了如下代码爬取糗百前10页图片，但是运行有问题，只能下载几张图片，明明有几十张的，求高手指点：
import urllib.request
import os
os.mkdir('糗百图片')
os.chdir('糗百图片')
web_page=1
#页码
pic_name=1
#文件名
def open_url(url):
    headers = {'User-Agent': 'User-Agent:Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36'}  
    req= urllib.request.Request(url, headers=headers)  
    response=urllib.request.urlopen(req)
    return response.read()
#定义打开链接返回HTML
while web_page!=11:
        url = 'https://www.qiushibaike.com/pic/page/'+str(web_page)+'/?s=4988624 '
            html=open_url(url).decode("utf-8")
            a=html.find('img src=')
            b=html.find('.jpg',a,a+100)
        #防止出现非jpg格式以外图片
            while a!=-1:
                if b!=-1:
                            c=html[a+9:b+4]
                            url2 = 'http:'+c
                             with open(str(pic_name)+'.jpg','wb') as f:
                                img=open_url(url2)
                                f.write(img)
                        pic_name+=1
                        a=html.find('img src=',b)
                               b=html.find('.jpg',a,a+100)
                        #我觉得这里没问题啊，a往下找，b从a开始找；我研究了好久啊  
        web_page+=1
   

最佳答案

月排行榜 / 总排行榜

yongxi

2017-6-6 01:52:52

那就给我一个最佳

跳转到最佳答案楼层

messi_xiong

我知道了 要考虑第一张就不是ipg情况  不会删帖啊

yongxi

那就给我一个最佳

yongxi

  嘿嘿