[已解决]怎么最快，最简单的判断抓到的http代理是真正能用的？

blackantt

怎么最快，最简单的判断抓到的http代理是真正能用的？

最佳答案

月排行榜 / 总排行榜

鱼cpython学习者

2023-2-5 09:57:25

blackantt 发表于 2023-2-4 19:09
套上代理不通的话，后续请求不会自动越过代理，是吧？

套不套代理是可以手动设置的

import requests

proxy = {'https': '114.114.114.114:80'} # 代理
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36'}
url = 'https://www.baidu.com'

res = requests.get(url, headers=headers, proxies=proxy, timeout=3) # 套代理

res = requests.get(url, headers=headers) # 不套代理

代理如果不通会报错，你可以搞个try except语句，报错怎么样，不报错怎么样

跳转到最佳答案楼层

鱼cpython学习者

套上代理访问百度，能通就是能用的

青出于蓝

如果想获得可用代理，可以用 https://fishc.com.cn/thread-200184-1-1.html

青出于蓝

楼上帖子用了telnetlib这个库，可以便捷判断ip是否可用，百度一下

suchocolate

用你的代理访问一下ip138或者其他什么的查ip的网站，看看他们识别到的是什么。

import requests


def main():
    proxy = {'http': 'HOST:PORT'}  # 你的代理服务器地址和端口
    url = 'https://my.ip.cn/api/index?ip=&type=0'
    headers = {'user-agent': 'firefox', 'Referer': 'https://my.ip.cn/', 'X-Requested-With': 'XMLHttpRequest'}
    r = requests.get(url, headers=headers, proxies=proxy)
    print(r.text)


if __name__ == '__main__':
    main()

blackantt

鱼cpython学习者 发表于 2023-2-4 09:54
套上代理访问百度，能通就是能用的

套上代理不通的话，后续请求不会自动越过代理，是吧？

鱼cpython学习者

blackantt 发表于 2023-2-4 19:09
套上代理不通的话，后续请求不会自动越过代理，是吧？

套不套代理是可以手动设置的

import requests

proxy = {'https': '114.114.114.114:80'} # 代理
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36'}
url = 'https://www.baidu.com'

res = requests.get(url, headers=headers, proxies=proxy, timeout=3) # 套代理

res = requests.get(url, headers=headers) # 不套代理

代理如果不通会报错，你可以搞个try except语句，报错怎么样，不报错怎么样