python爬虫进阶BeautifulSoup对象【1】

MSK

在BeautifulSoup初窥中，我们初步了解了BeautifulSoup，这一节我们将介绍
BeautifulSoup对象
推荐阅读：BeautifulSoup节点





[b]Beautiful Soup将复杂HTML文档转换成一个复杂的树形结构,每个节点都是Python对象,所有对象可以归纳为4种:


Tag ,

NavigableString,

BeautifulSoup ,

Comment .[/b]



[b]

Tag对象

[/b]

Tag 对象与XML或HTML原生文档中的tag相同:

1. soup = BeautifulSoup('<b class="boldest">Extremely bold</b>')
   
2. tag = soup.b
   
3. type(tag)
   
4. # <class 'bs4.element.Tag'>

复制代码

属性


1.Name
每个tag都有自己的名字（标签名）,通过 .name 来获取:

1. tag.name
   
2. # u'b'

复制代码

如果对Tag进行修改，那将影响所有通过当前Beautiful Soup对象生成的HTML文档:

1. tag.name = "blockquote"
   
2. tag
   
3. # <blockquote class="boldest">Extremely bold</blockquote>

复制代码

2.Attributes




一个tag可能有很多个属性. tag <b class="boldest"> 有一个 “class” 的属性,值为 “boldest” . tag的属性的操作方法与字典相同:

1. tag['class']
   
2. # u'boldest'

复制代码

也可以直接”点”取属性, 比如: .attrs :

1. tag.attrs
   
2. # {u'class': u'boldest'}
   
3. 
   
4. 
   
5. 
   
6. 
   
7. [size=4]tag的属性可以被添加,删除或修改. 再说一次, tag的属性操作方法与字典一样[/size]
   
8. 
   
9. tag['class'] = 'verybold'
   
10. tag['id'] = 1
    
11. tag
    
12. # <blockquote class="verybold" id="1">Extremely bold</blockquote>
    
13. 
    
14. del tag['class']
    
15. del tag['id']
    
16. tag
    
17. # <blockquote>Extremely bold</blockquote>
    
18. 
    
19. tag['class']
    
20. # KeyError: 'class'
    
21. print(tag.get('class'))
    
22. # None

复制代码

[b]

NavigableString对象

[/b]



字符串常被包含在tag内.Beautiful Soup用 NavigableString 类来包装tag中的字符串:

1. tag.string
   
2. # u'Extremely bold'
   
3. type(tag.string)
   
4. # <class 'bs4.element.NavigableString'>

复制代码

tag中包含的字符串不能编辑,但是可以被替换成其它的字符串,用 replace_with() 方法:

1. 
   
2. tag.string.replace_with("No longer bold")
   
3. tag
   
4. # <blockquote>No longer bold</blockquote>

复制代码

[b]

BeautifulSoup对象

[/b]



BeautifulSoup 对象表示的是一个文档的全部内容.大部分时候,可以把它当作 Tag 对象
其实就是生成的soup

1. soup.name
   
2. # u'[document]'

复制代码

[b]

Comment对象

[/b]



Comment 对象就是html文档的注释，是一个特殊类型的 NavigableString 对象:

1. temp = "<b><!--Hey, buddy. Want to buy a used parser?--></b>"
   
2. soup = BeautifulSoup(temp,'html.parser')
   
3. comment = soup.b.string
   
4. type(comment)
   
5. # <class 'bs4.element.Comment'>

复制代码