爬取高匿名IP

蛮牛9527

感谢的分享

chenfus

看看

liuruijin

66666666666666666666

会园

看看

chanwww

iiiiiiiii

Sticktomylove

111

立阳

学习学习

Mr.I

感谢分享，学习一下

T----T

？

Albertdjy

学习

上官竹珣

优秀

112024

大佬！！

iltifa

能用吗

hali639

学习

demper

学习一下代理IP

atlength

学习新知识

17671059469

学习

ZhKQYu

看看

sxszhub

学习

nizitao

1. import re
   
2. import urllib.request
   
3. import os
   
4. import time
   
5. 
   
6. def open_url(url):
   
7.     req = urllib.request.Request(url)
   
8.     req.add_header('User-Agent','Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36')
   
9.     page = urllib.request.urlopen(url)
   
10.     html = page.read().decode('utf-8')
    
11. 
    
12.     return html
    
13. 
    
14. 
    
15. def get_ip():
    
16.    
    
17.     #如果当前目录存在ip.txt文件，则删除
    
18.     file = os.getcwd() + '\ip.txt'
    
19.     if os.path.exists(file):
    
20.         os.remove(file)
    
21. 
    
22.    
    
23.     for page in range(1,100):
    
24.         url = 'https://www.kuaidaili.com/free/inha/{}/'.format(page)
    
25.         html = open_url(url)
    
26.         #ip地址
    
27.         p = re.compile('(?:(?:[0,1]?\d?\d|2[0-4]\d|25[0-5])\.){3}(?:[0,1]?\d?\d|2[0-4]\d|25[0-5])')
    
28.         alist = p.findall(html)
    
29. 
    
30.         #获取端口
    
31.         temp = re.findall('data-title="PORT">\d+',html)
    
32.         temp = re.findall('\d+',str(temp))
    
33.         dabao = dict(zip(alist,temp))
    
34.         iplist = []
    
35.         for i,k in dabao.items():
    
36.             iplist.append('http://'+i+':'+k)
    
37.         os.chdir(os.getcwd())
    
38. 
    
39.         with open('ip.txt','a') as flie:
    
40.             for each in iplist:
    
41.                 flie.write(each)
    
42.                 flie.write('\n')
    
43.         time.sleep(1)
    
44.         print('已经获取：{}'.format(page*15))
    
45.         
    
46. 
    
47. if __name__ == '__main__':  
    
48.     get_ip()

复制代码