鱼C论坛

 找回密码
 立即注册
查看: 2842|回复: 5

055讲爬虫隐藏IP问题请教

[复制链接]
发表于 2020-3-6 17:32:48 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
按照视频编写的爬虫,隐藏IP,whatismyip那个访问不了,换成了'https://www.123cha.com/ip/',但是返回的还是真实IP,是访问网址的问题吗?





  1. import urllib.request
  2. import random

  3. #访问地址
  4. url = 'https://www.123cha.com/ip/'

  5. #【代理】(设置代理ip、创建opener、安装opener)
  6. #代理ip
  7. ip_list = ['119.6.144.73:81','183.203.208.166:8118','111.1.32.28:81']
  8. #设置代理ip
  9. ip_ran = random.choice(ip_list)
  10. proxy_support = urllib.request.ProxyHandler({'http':ip_ran})
  11. print(ip_ran)
  12. #创建opener
  13. opener = urllib.request.build_opener(proxy_support)
  14. #添加header
  15. opener.addheaders = [('user-agent','Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36')]
  16. #安装opener
  17. urllib.request.install_opener(opener)

  18. #打开url
  19. response = urllib.request.urlopen(url)

  20. #读取、解码
  21. html = response.read().decode('utf-8')

  22. print(html)
复制代码
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-3-8 20:26:52 | 显示全部楼层
木有人回答嘛
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-3-8 20:31:09 From FishC Mobile | 显示全部楼层
donaldl8 发表于 2020-3-8 20:26
木有人回答嘛

代理基本不用研究,除非你肯花银子去买代理
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-9 17:35:56 | 显示全部楼层
wp231957 发表于 2020-3-8 20:31
代理基本不用研究,除非你肯花银子去买代理

所以这是因为代理IP的问题吗?主要是想知道为什么不成功。。
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-3-9 17:37:23 From FishC Mobile | 显示全部楼层
donaldl8 发表于 2020-3-9 17:35
所以这是因为代理IP的问题吗?主要是想知道为什么不成功。。


你没有试吗?很多免费代理ip都不能用
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-9 22:55:31 | 显示全部楼层
wp231957 发表于 2020-3-9 17:37
你没有试吗?很多免费代理ip都不能用

好的我试试,谢谢
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-7-12 18:12

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表