论坛 › Python交流 › 爬取高匿名IP

蛮牛9527 发表于 2019-9-7 03:22:39

感谢的分享

chenfus 发表于 2019-9-7 23:57:46

看看

liuruijin 发表于 2019-9-11 18:58:55

66666666666666666666

会园 发表于 2019-9-28 14:25:22

看看

chanwww 发表于 2019-10-3 19:48:40

iiiiiiiii

Sticktomylove 发表于 2019-10-14 15:12:15

111

立阳 发表于 2019-10-15 11:29:22

学习学习

Mr.I 发表于 2020-2-18 19:14:48

感谢分享，学习一下

T----T 发表于 2020-2-19 19:50:20

？

Albertdjy 发表于 2020-2-26 08:29:49

学习

上官竹珣 发表于 2020-2-27 23:34:46

优秀

112024 发表于 2020-3-4 13:04:08

大佬！！

iltifa 发表于 2020-3-4 13:38:51

能用吗

hali639 发表于 2020-3-16 16:39:08

学习

demper 发表于 2020-3-31 16:48:09

学习一下代理IP

atlength 发表于 2020-4-17 21:44:52

学习新知识

17671059469 发表于 2020-4-26 21:53:20

学习

ZhKQYu 发表于 2020-4-28 11:22:02

看看

sxszhub 发表于 2020-5-28 15:25:47

学习

nizitao 发表于 2020-5-31 11:25:46

import re
import urllib.request
import os
import time

def open_url(url):
    req = urllib.request.Request(url)
    req.add_header('User-Agent','Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36')
    page = urllib.request.urlopen(url)
    html = page.read().decode('utf-8')

    return html


def get_ip():
   
    #如果当前目录存在ip.txt文件，则删除
    file = os.getcwd() + '\ip.txt'
    if os.path.exists(file):
      os.remove(file)

   
    for page in range(1,100):
      url = 'https://www.kuaidaili.com/free/inha/{}/'.format(page)
      html = open_url(url)
      #ip地址
      p = re.compile('(?:(?:?\d?\d|2\d|25)\.){3}(?:?\d?\d|2\d|25)')
      alist = p.findall(html)

      #获取端口
      temp = re.findall('data-title="PORT">\d+',html)
      temp = re.findall('\d+',str(temp))
      dabao = dict(zip(alist,temp))
      iplist = []
      for i,k in dabao.items():
            iplist.append('http://'+i+':'+k)
      os.chdir(os.getcwd())

      with open('ip.txt','a') as flie:
            for each in iplist:
                flie.write(each)
                flie.write('\n')
      time.sleep(1)
      print('已经获取：{}'.format(page*15))
      

if __name__ == '__main__':
    get_ip()

查看完整版本: 爬取高匿名IP