初学关于正则到的链接列表访问

天冰

import urllib2
import re
url='http://XXXXXX'
request=urllib2.Request(url)
response=urllib2.urlopen(request)
content = response.read().decode('utf-8')
pattern=re.compile('<span class="STab">.*?href="(.*?)" title=".*?">(.*?)</a>',re.S)
contenturl=re.findall(pattern,content)
for item in contenturl:
    print item[0]
以上得到连接列表

正则到了 item[0]链接列表及，item[1]标题列表，但接下来不知道怎么访问了，实际上我是想首先得到论坛文章列表及连接，即把链接和标题正则到，然后进连接再次正则评论信息，但不知道怎么依次访问这个连接列表。求指导。

SixPy

http://bbs.fishc.com/thread-74332-1-1.html

hldh214

直接发请求即可

天冰

hldh214 发表于 2016-8-27 11:17
直接发请求即可

能否代码表示一下，不太清楚

hldh214

天冰 发表于 2016-8-27 11:35
能否代码表示一下，不太清楚

1. request=urllib2.Request(url)

复制代码

天冰

hldh214 发表于 2016-8-27 11:37

是不是理解错误，我是想访问列表里的连接： item[0]

SixPy

hldh214 发表于 2016-8-27 11:37

伸手党想要个栗子~

hldh214

天冰 发表于 2016-8-27 12:02
是不是理解错误，我是想访问列表里的连接： item[0]

1. request=urllib2.Request(item[0])

复制代码

天冰

hldh214 发表于 2016-8-27 13:27

加上：for item in contenturl:
    request=urllib2.Request(item[0])
    response=urllib2.urlopen(request)
运行错误
    raise HTTPError(req.get_full_url(), code, msg, hdrs, fp)

HTTPError: HTTP Version Not Supported

hldh214

天冰 发表于 2016-8-27 16:26
加上：for item in contenturl:
    request=urllib2.Request(item[0])
    response=urllib2.urlopen( ...

http://stackoverflow.com/questions/23715943/python-http-error-505-http-version-not-supported

试试 requests

Nico35

可以可以 很棒