爬虫-斗图网表情爬取

396355023

新人第一条虫。有不足的地方请指正。

1. import requests
   
2. import re
   
3. 
   
4. 
   
5. def getDouTu(page):
   
6.     url = requests.get('https://www.doutula.com/article/list/?page={}'.format(page)).text
   
7.     headers = {
   
8.         "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like\
   
9.          Gecko) Chrome/55.0.2883.87 Safari/537.36"}
   
10.     reg = r'data-original="(.*?)".*?alt="(.*?)"'
    
11.     reg = re.compile(reg, re.S)
    
12.     imagesList = re.findall(reg, url)
    
13.     for i in imagesList:
    
14.         image_url = i[0]
    
15.         image_title = i[1]
    
16.         print(image_url, image_title)
    
17.         if image_url[-1] == "g":
    
18.             response = requests.get(image_url)
    
19.             filename = '%s.jpg' % image_title
    
20.             with open(filename, "wb") as jpg:
    
21.                 jpg.write(response.content)
    
22.         elif image_url[-1] == "f":
    
23.             response = requests.get(image_url)
    
24.             filename = '%s.gif' % image_title
    
25.             with open(filename, "wb") as gif:
    
26.                 gif.write(response.content)
    
27.         return
    
28. 
    
29. for i in range(1,1000):
    
30.     getDouTu(i)

复制代码

过默

怎么爬，点不会，复制了加微信15850526647

396355023

过默 发表于 2019-4-14 21:51
怎么爬，点不会，复制了加微信15850526647

你加我18181228878