python 061 爬虫之异常处理

风不会停息

1. HTTP状态码大全： https://fishc.com.cn/forum.php?m ... peid%26typeid%3D403

2. urllib.error： 由urllib请求引发的异常类， 语法为
try:
        xxx
except  urllib.error.URLError [as e]:
        xxx

e.reason为异常原因， e.code为异常状态码

3. HTTPError包含在URLError中， 语法和URLError一样， urllib异常在返回时会返回一个网页， 可以e.read()读出其中的内容

4. 处理异常的代码写法：

from urllib.request import Request, urlopen
from urllib.error import URLError
req = Request(someurl)
try:
    response = urlopen(req)
except URLError as e:
    if hasattr(e, 'reason'):
        print('We failed to reach a server.')
        print('Reason: ', e.reason)
    elif hasattr(e, 'code'):
        print('The server couldn\'t fulfill the request.')
        print('Error code: ', e.code)
else:
# everything is fine