爬取妹子图片（福利福利！！！）附上代码

1510049928

这里使用xpath爬取妹子图（https://www.mzitu.com/mm/page/2/）
附上代码

1. import requests
   
2. from lxml import etree
   
3. import os
   
4. 
   
5. #获取每页的地址
   
6. def get_url(page):
   
7.     url = 'https://www.mzitu.com/mm/page/' + str(page) + '/'
   
8.     return url
   
9. 
   
10. def url_open(url):
    
11.     headers = {
    
12.         'User-Agent'  :'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_6) AppleWebKit/601.7.7 (KHTML, like Gecko) Version/9.1.2 Safari/601.7.7',
    
13.         'Referer' :'https://www.mzitu.com/mm/'}
    
14.     res = requests.get(url,headers = headers)
    
15.     return res
    
16. 
    
17. #使用xpath查找图片地址
    
18. def find_img(res):
    
19.     html = etree.HTML(res.text)
    
20.     result = html.xpath('//ul[@id="pins"]//li//a//img/@data-original')
    
21.     return result
    
22. 
    
23. #使用xpath查找图片名称
    
24. def find_name(res):
    
25.     html = etree.HTML(res.text)
    
26.     result = html.xpath('//ul[@id="pins"]//li//a//img/@alt')
    
27.     return result
    
28. 
    
29. def main(pages):
    
30.     os.mkdir('妹子')
    
31.     os.chdir('妹子')
    
32.     for each in range(1,pages):
    
33.         url = get_url(each)
    
34.         res = url_open(url)
    
35.         img_list = find_img(res)
    
36.         img_name = find_name(res)
    
37.         for i in range(len(img_list)):
    
38.             img = url_open(img_list[i])
    
39.             with open(img_name[i]+'.jpg','wb') as f:
    
40.                 f.write(img.content)
    
41.    
    
42. if '__main__' == __name__:
    
43.     temp = int(input('请输入要爬取的页数：'))
    
44.     pages = temp+1
    
45.     main(pages)
    
46. 
    

复制代码

zhuangyao

顶个  貌似会火

靳泽宇

网址都打不开

好好学习鸭

牛批

xin10081

这个网站厉害了

200512435066

这才是学习python爬虫的初衷！！

hao521521

503202360

别人写好的代码，我是怎么利用，python软件已经安装