鱼C论坛

 找回密码
 立即注册
查看: 2119|回复: 4

[已解决]学到爬虫的自我修养--隐藏,可为什么代理后结果跟小甲鱼视频不一样呢

[复制链接]
发表于 2021-6-15 15:01:32 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
在学一只爬虫的自我修养--隐藏
跟着小甲鱼视频打的代码
弹幕说网址进不去了
可怎么给我了一个hello!呢
换其他代理ip就报错

d77d1887a25554df25c617bd6313c8c.png


import urllib.request

url = 'http://www.whatismyip.com.tw'

proxy_support = urllib.request.ProxyHandler({'http':'47.103.200.224:80'})

opener = urllib.request.build_opener(proxy_support)
opener.addheaders = [('User-Agent','Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.77 Safari/537.36')]

urllib.request.install_opener(opener)

response = urllib.request.urlopen(url)
html = response.read().decode('utf-8')

print(html)
最佳答案
2021-6-15 18:08:43

帮你换个 URL和 IP 了,试试看吧,不保证你等下可以运行,这个是透明的 IP看得见自己原 IP:
import urllib.request

url = 'http://httpbin.org/get'

proxy_support = urllib.request.ProxyHandler({'http':'49.232.118.212:3128'})

opener = urllib.request.build_opener(proxy_support)
opener.addheaders = [('User-Agent','Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.77 Safari/537.36')]

urllib.request.install_opener(opener)

response = urllib.request.urlopen(url)
html = response.read().decode('utf-8')

print(html)


1.png
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2021-6-15 17:52:01 From FishC Mobile | 显示全部楼层
爬虫是有实效性的,甲鱼的代理估计早就失效了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-6-15 18:08:43 | 显示全部楼层    本楼为最佳答案   

帮你换个 URL和 IP 了,试试看吧,不保证你等下可以运行,这个是透明的 IP看得见自己原 IP:
import urllib.request

url = 'http://httpbin.org/get'

proxy_support = urllib.request.ProxyHandler({'http':'49.232.118.212:3128'})

opener = urllib.request.build_opener(proxy_support)
opener.addheaders = [('User-Agent','Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.77 Safari/537.36')]

urllib.request.install_opener(opener)

response = urllib.request.urlopen(url)
html = response.read().decode('utf-8')

print(html)


1.png
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2021-6-15 19:01:29 | 显示全部楼层
Twilight6 发表于 2021-6-15 18:08
帮你换个 URL和 IP 了,试试看吧,不保证你等下可以运行,这个是透明的 IP看得见自己原 IP:

嗯嗯,谢谢,
用了你给的新IP放在之前小甲鱼的视频的URL也可以了
突然http://www.whatismyip.com.tw这个网站复活了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-6-15 19:05:26 | 显示全部楼层
小桥流水清无鱼 发表于 2021-6-15 19:01
嗯嗯,谢谢,
用了你给的新IP放在之前小甲鱼的视频的URL也可以了
突然http://www.whatismyip. ...



噗 哈哈,那就是 IP 问题

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-15 13:44

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表