测试题:
0. urlopen() 方法的 timeout 参数用于设置什么?
答:设置网址访问超时时间。
1. 如何从 urlopen() 返回的对象中获取 HTTP 状态码?
答:使用urlopen().getcode()
2. 在客户端和服务器之间进行请求-响应时,最常用的是哪两种方法?
答:get 和 post
3. HTTP 是基于请求-响应的模式,那是客户端发出请求,服务端做出响应;还是服务端发出请求,客户端做出响应呢?
答:一般post是客户端发出的请求,get是服务器发出的。
4. User-Agent 属性通常是记录什么信息?
答:系统环境,比如操作系统、浏览器版本
5. 如何通过 urlopen() 使用 POST 方法像服务端发出请求?
答:urlopen(url,data)
6. 使用字符串的什么方法将其它编码转换为 Unicode 编码?
答:encode()
7. JSON 是什么鬼?
答复:是一种轻量级的数据交换格式
动动手:0. 配合 EasyGui,给“下载一只猫“的代码增加互动:
- 让用户输入尺寸;
- 如果用户不输入尺寸,那么按默认宽400,高600下载喵;
- 让用户指定保存位置。
程序实现如下图:



答:

1. 写一个登录豆瓣的客户端。
这道题可能要难为大家了,因为需要 N 多你没学过的知识!
不过我也不打算让你断送希望,下边是一个可行的 Python 2 的代码片段,请修改为 Python 3 版本。其中一些库和知识点你可能还没学过,但凭借着过人的自学能力,你可以在不看答案的情况下完成任务的,对吗?
程序实现如下图:

Python 2 实现代码:
- # -- coding:gbk --
- import re
- import urllib, urllib2, cookielib
- loginurl = 'https://www.douban.com/accounts/login'
- cookie = cookielib.CookieJar()
- opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookie))
- params = {
- "form_email":"your email",
- "form_password":"your password",
- "source":"index_nav" #没有的话登录不成功
- }
- #从首页提交登录
- response=opener.open(loginurl, urllib.urlencode(params))
- #验证成功跳转至登录页
- if response.geturl() == "https://www.douban.com/accounts/login":
- html=response.read()
- #验证码图片地址
- imgurl=re.search('<img id="captcha_image" src="(.+?)" alt="captcha" class="captcha_image"/>', html)
- if imgurl:
- url=imgurl.group(1)
- #将图片保存至同目录下
- res=urllib.urlretrieve(url, 'v.jpg')
- #获取captcha-id参数
- captcha=re.search('<input type="hidden" name="captcha-id" value="(.+?)"/>' ,html)
- if captcha:
- vcode=raw_input('请输入图片上的验证码:')
- params["captcha-solution"] = vcode
- params["captcha-id"] = captcha.group(1)
- params["user_login"] = "登录"
- #提交验证码验证
- response=opener.open(loginurl, urllib.urlencode(params))
- ''' 登录成功跳转至首页 '''
- if response.geturl() == "http://www.douban.com/":
- print 'login success ! '
报错了,被禁爬了、
本讲总结: