055讲爬虫隐藏IP问题请教

donaldl8 · 发表于 2020-3-6 17:32:48

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

按照视频编写的爬虫，隐藏IP，whatismyip那个访问不了，换成了'https://www.123cha.com/ip/'，但是返回的还是真实IP，是访问网址的问题吗？

import urllib.request
import random

#访问地址
url = 'https://www.123cha.com/ip/'

#【代理】(设置代理ip、创建opener、安装opener)
#代理ip
ip_list = ['119.6.144.73:81','183.203.208.166:8118','111.1.32.28:81']
#设置代理ip
ip_ran = random.choice(ip_list)
proxy_support = urllib.request.ProxyHandler({'http':ip_ran})
print(ip_ran)
#创建opener
opener = urllib.request.build_opener(proxy_support)
#添加header
opener.addheaders = [('user-agent','Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36')]
#安装opener
urllib.request.install_opener(opener)

#打开url
response = urllib.request.urlopen(url)

#读取、解码
html = response.read().decode('utf-8')

print(html)

donaldl8 · 发表于 2020-3-8 20:26:52

木有人回答嘛

wp231957 · 发表于 2020-3-8 20:31:09

donaldl8 发表于 2020-3-8 20:26
木有人回答嘛

代理基本不用研究，除非你肯花银子去买代理

donaldl8 · 发表于 2020-3-9 17:35:56

wp231957 发表于 2020-3-8 20:31
代理基本不用研究，除非你肯花银子去买代理

所以这是因为代理IP的问题吗？主要是想知道为什么不成功。。

wp231957 · 发表于 2020-3-9 17:37:23

donaldl8 发表于 2020-3-9 17:35
所以这是因为代理IP的问题吗？主要是想知道为什么不成功。。

你没有试吗？很多免费代理ip都不能用

donaldl8 · 发表于 2020-3-9 22:55:31

wp231957 发表于 2020-3-9 17:37
你没有试吗？很多免费代理ip都不能用

好的我试试，谢谢

账号		自动登录	找回密码
密码			立即注册