论坛 › Python交流 › pygame山寨全民大战飞机

songver 发表于 2019-4-16 09:21:33

66666666666666666666

zjhahaha 发表于 2019-4-16 13:03:57

import urllib.request
import urllib.error
import os
import sys
import http.server
import http.client
import time
import re
import random
import math

data = None
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/31.0.1650.63 Safari/537.36'}
enctype = 'utf-8'
proxies = []
max_error_times = 5      #最多允许失败5次，否则放弃该图片下载

def create_localhost():
    number = int((math.sqrt(5)-1)/2) * len(proxies)
    for x in range(number):
      proxies.append(None)

def get_result(req_or_url,is_retrieve=False,filename = None):         #flag是否使用retrieve
    error_time = 0
    while True:
      try:
            if error_time == max_error_times:
                print('失败次数达%d次......放弃操作' % max_error_times)
                return None
            error_time += 1
            if is_retrieve:
                return urllib.request.urlretrieve(req_or_url,filename)
            else:
                return urllib.request.urlopen(req_or_url)
      except urllib.error.URLError as e:
            if hasattr(e,'code'):         
                print(e.code,e.reason)
                change_proxy()
                continue
            elif hasattr(e,'reason'):
                print(e)
                change_proxy()
                continue
      except (ConnectionResetError,http.client.BadStatusLine) as e:
            print(e)
            change_proxy()
            continue
      except TimeoutError as e:
            print(e)
            print('服务器长时间无响应，自动切换代理.....')
            change_proxy()
            continue

def get_proxy():
    global data,headers,proxies
    req = urllib.request.Request('http://www.xici.net.co',None,headers)
    response = get_result(req)
    html = response.read().decode('utf-8')
    p = re.compile(r'''<tr\sclass[^>]*>\s+
                                    <td>.+</td>\s+
                                    <td>(.*)?</td>\s+
                                    <td>(.*)?</td>\s+
                                    <td>(.*)?</td>\s+
                                    <td>(.*)?</td>\s+
                                    <td>(.*)?</td>\s+
                                    <td>(.*)?</td>\s+
                              </tr>''',re.VERBOSE)
    proxy_list = p.findall(html)
    for each_proxy in proxy_list:
      if each_proxy == 'HTTP':
            proxies.append(each_proxy+':'+each_proxy)

def change_proxy():
    proxy = random.choice(proxies)
    if proxy == None:
      proxy_support = proxy_support = urllib.request.ProxyHandler({})
    else:
      proxy_support = urllib.request.ProxyHandler({'http':proxy})
    opener = urllib.request.build_opener(proxy_support)
    opener.addheaders = [('User-Agent',headers['User-Agent'])]
    urllib.request.install_opener(opener)
    print('智能切换代理：%s' % ('本机' if proxy==None else proxy))

def get_page():         #获取最大页数
    home = 'http://jandan.net/ooxx'
    global data,headers,enctype
    req = urllib.request.Request(home,data,headers)
    response = get_result(req)
    html = response.read().decode(enctype)
    find_string = 'current-comment-page'
    find_start = html.index(find_string) + len(find_string) + 3
    find_end = html.index(']',find_start+1)
    return int(html)
test = None
def get_pic(page):      #生成器，返回一个图片链接
    global data,headers,enctype
    while True:
      url = 'http://jandan.net/ooxx/page-%d' % page
      print('当前页面：%d' % page)
      req = urllib.request.Request(url,data,headers)
      response = get_result(req)
      if response == None:
            print('获取页面失败.....')
            sys.exit()
      html = response.read().decode(enctype)
      pic = re.compile(r'<img\s+src="(http://.+?\.(?:jpg|jpeg|gif))"')
      for pic in pic.finditer(html):
            yield pic.group(1)
      time.sleep(5)
      page -= 1
      if page<1:
            break

save_path = 'D:\\图片\\妹子图'

def download():
    count = 1
    global data,headers
    for pic_url in get_pic(get_page()):         #get_page()改为页数如1000可从1000页开始下载
      file_name = os.path.split(pic_url)
      if not os.path.isdir(save_path):    #目录不存在就创建
            os.makedirs(save_path)
      get_result(pic_url,True,save_path+'\\'+file_name)
      print('本次成功下载第%d个图片! %s' % (count , pic_url))
      count += 1

if __name__ == '__main__':
    get_proxy()
    create_localhost()
    download()

lilong77880 发表于 2019-4-17 09:37:38

学习

lzl7238591 发表于 2019-4-17 10:21:11

6666666666666666666666学习学习

菊部地区有雪 发表于 2019-4-17 10:52:59

hahahah

小学文化偏要学 发表于 2019-4-17 12:34:13

我什么时候能做成这样

鱼小Ccc 发表于 2019-4-19 16:08:42

拿走了谢谢

Daniel_Fan 发表于 2019-4-19 16:30:04

有点意思呀！

素颜小红帽 发表于 2019-4-20 20:05:40

学习一下

破月霜华 发表于 2019-5-10 12:20:45

学习学习

骚强么么哒 发表于 2019-5-10 17:13:49

学习

小甲鱼开车 发表于 2019-5-10 17:25:21

好厉害( _)

C'rɑごy 发表于 2019-5-10 18:17:25

666

lixiangyv 发表于 2019-5-11 06:38:38

666

wxy13834531623 发表于 2019-5-11 16:36:46

厉害

jm7645178 发表于 2019-5-12 01:11:11

很厉害

rony51 发表于 2019-5-12 02:15:32

膜拜

亥冬 发表于 2019-5-12 07:59:38

mark

武次郎 发表于 2019-5-12 19:23:48

厉害了

MrWu丶 发表于 2019-5-24 20:10:26

111111

查看完整版本: pygame山寨全民大战飞机