鱼C论坛

 找回密码
 立即注册
查看: 1175|回复: 1

[已解决]Python 55讲,第一个动手作业题

[复制链接]
发表于 2020-7-22 20:22:33 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 majian890324 于 2020-7-22 20:23 编辑
import urllib.request
import re
from bs4 import BeautifulSoup

def main():
    url = "http://baike.baidu.com/view/284853.htm"
    response = urllib.request.urlopen(url)
    html = response.read()
    soup = BeautifulSoup(html, "html.parser") # 使用 Python 默认的解析器
    
   [code] for each in soup.find_all(href=re.compile("view")):
        print(each.text, "->", ''.join(["http://baike.baidu.com", each["href"]]))
        # 上边用 join() 不用 + 直接拼接,是因为 join() 被证明执行效率要高很多

if __name__ == "__main__":
    main()

请问大佬们,这个程序中
 for each in soup.find_all(href=re.compile("view")):
        print(each.text, "->", ''.join(["http://baike.baidu.com", each["href"]]))

这两句看了半天也看不懂是什么意思,主要是:
href=re.compile("view")
each["href"]
这两句不太懂
1、我知道re.compile是创建一个正则表达式模型,然后: href 是HTML中的标签? 还是:re.compile()的一个赋值变量?里边的“view”也没有出现正则表达式该有的符号呀?比如:*+?这类的。怎么就能匹配到含有view这个单词的网址呢?

2、each["href"]这句也不懂,尤其是:[‘href’]这个是什么意思呀?

3、for循环这句:for each in soup.find_all(href=re.compile("view")):括号里用的是哪个参数收集的数据:soup.find_all(name,attr,**wrages) 是这三个哪个:我在小破站看了下beautifulsoup的视频,attr这个要是个字典,所以应该排除了,**wrages这个就像是变量赋值,我看这个挺像,就是不知道是不是这个?


问题比较多,实在不好意思,辛苦辛苦!!!
最佳答案
2020-7-22 20:31:19


soup.find_all(href=re.compile("view"))


查找网页中含有 href  属性的节点,并且该属性中含有 'view' 字符

而 each["href"] 的作用是因为上面的 soup 提取的是节点形成的列表,而不是直接把 href 给提取出来,所以这里 each["href"] 就是提取这个节点的 href 属性


1、我知道re.compile是创建一个正则表达式模型,然后: href 是HTML中的标签? 还是:re.compile()的一个赋值变量?
里边的“view”也没有出现正则表达式该有的符号呀?比如:*+?这类的。怎么就能匹配到含有view这个单词的网址呢?


正则并不是一定要填写 .+*之类的呀,.+*这些字符都是在正则有特殊作用的字符,你如果单纯输入 view 就是匹配字符串 view

2、each["href"]这句也不懂,尤其是:[‘href’]这个是什么意思呀?


for 循环到的节点赋值给 each ,然后 each["href"] 就是提取这个节点中的 href 属性

3、for循环这句:for each in soup.find_all(href=re.compile("view")):括号里用的是哪个参数收集的数据:soup.find_all(name,attr,**wrages) 是这三个哪个:我在小破站看了下beautifulsoup的视频,attr这个要是个字典,所以应该排除了,**wrages这个就像是变量赋值,我看这个挺像,就是不知道是不是这个?


就是属于 attr 部分的,你可以看看这里的笔记: 数据提取-Beautiful Soup


想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-7-22 20:31:19 | 显示全部楼层    本楼为最佳答案   


soup.find_all(href=re.compile("view"))


查找网页中含有 href  属性的节点,并且该属性中含有 'view' 字符

而 each["href"] 的作用是因为上面的 soup 提取的是节点形成的列表,而不是直接把 href 给提取出来,所以这里 each["href"] 就是提取这个节点的 href 属性


1、我知道re.compile是创建一个正则表达式模型,然后: href 是HTML中的标签? 还是:re.compile()的一个赋值变量?
里边的“view”也没有出现正则表达式该有的符号呀?比如:*+?这类的。怎么就能匹配到含有view这个单词的网址呢?


正则并不是一定要填写 .+*之类的呀,.+*这些字符都是在正则有特殊作用的字符,你如果单纯输入 view 就是匹配字符串 view

2、each["href"]这句也不懂,尤其是:[‘href’]这个是什么意思呀?


for 循环到的节点赋值给 each ,然后 each["href"] 就是提取这个节点中的 href 属性

3、for循环这句:for each in soup.find_all(href=re.compile("view")):括号里用的是哪个参数收集的数据:soup.find_all(name,attr,**wrages) 是这三个哪个:我在小破站看了下beautifulsoup的视频,attr这个要是个字典,所以应该排除了,**wrages这个就像是变量赋值,我看这个挺像,就是不知道是不是这个?


就是属于 attr 部分的,你可以看看这里的笔记: 数据提取-Beautiful Soup


想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-19 20:37

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表