|
|
马上注册,结交更多好友,享用更多功能^_^
您需要 登录 才可以下载或查看,没有账号?立即注册
x
import urllib.request
import re
from bs4 import BeautifulSoup
def main():
url = "http://baike.baidu.com/view/284853.htm"
response = urllib.request.urlopen(url)
html = response.read()
soup = BeautifulSoup(html, "html.parser") # 使用 Python 默认的解析器
for each in soup.find_all(href=re.compile("view")):
print(each.text, "->", ''.join(["http://baike.baidu.com", each["href"]]))
# 上边用 join() 不用 + 直接拼接,是因为 join() 被证明执行效率要高很多
if __name__ == "__main__":
main()
我按照这个程序运行为什么只有返回一个“锁定词条”?
=========== RESTART: E:/python study/作业/WebSpider/baiducitiao_1.py ===========
锁定 -> http://baike.baidu.com/view/10812319.htm
>>>
谢谢各位大神
本帖最后由 ooxx7788 于 2017-4-20 19:54 编辑
因为这个网页就一条。你换个孙悟空试试好了!
|
|