爬虫--urlopen出现timeout等错误

无fucks说

#为了突出问题，把ip代理部分代码删除了
def Agent_response(url):
    rsp = request.urlopen(url,timeout = 8)
    html = rsp.read().decode('utf-8')
    js = json.loads(html)         
    return js

出现的错误有：
        1.time out
        2.URLError: <urlopen error Remote end closed connection without response>
        3.由于目标计算机积极拒绝，无法连接

个人推测：
               网络不稳定的问题，但是用浏览器打的开网页。纠结的啊

url 网址实例：
https://maps.googleapis.com/maps/api/place/search/json?location=41.935385,-87.696485&radius=1000&sensor=true&key=AIzaSyBMGzm-1zXeLX-QNi9N7ozRJWZlREyYEe4&types=accounting

程序访问google map api爬取数据

各位路过大佬求指导指导，互相学习，叩谢。

ba21

浏览器能打的开网页，说明服务器有判断；
给个 header 处理下应该就可以了。

无fucks说

ba21 发表于 2017-8-10 22:40
浏览器能打的开网页，说明服务器有判断；
给个 header 处理下应该就可以了。

为什么我单独弄urllib.rrquest.urlopen('http://www.baidu.com') 都出不来

hustlin

先去掉代理，再添加header试试。

无fucks说

hustlin 发表于 2017-8-11 10:37
先去掉代理，再添加header试试。

还是不行，但是打开http站点就很快，而https站点很慢，甚至超时