[已解决]关于bs的用法 find_all 如何使用多层查找条件

taigefcxj

我想查找 某个<div>标签下的全部<li>

发现 soup.find_all("div li") 就提取不到内容

用find_all直接找<li>就会把其他位置的 li 标签也找过来

请问 find_all 怎么样添加多层的查找条件呢？让他先找到 div 标签下 再把 li找出来 而不是全局的 li

最佳答案

月排行榜 / 总排行榜

raimond

2018-8-9 18:11:00

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. 
   
4. headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 \
   
5. (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}
   
6. 
   
7. url = 'http://bj.xiaozhu.com/'
   
8. 
   
9. res = requests.get(url, headers = headers)
   
10. soup = BeautifulSoup(res.text, 'html.parser')
    
11. title = soup.select('div > a')
    
12. print(title)

复制代码

用select 可以

跳转到最佳答案楼层

raimond

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. 
   
4. headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 \
   
5. (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}
   
6. 
   
7. url = 'http://bj.xiaozhu.com/'
   
8. 
   
9. res = requests.get(url, headers = headers)
   
10. soup = BeautifulSoup(res.text, 'html.parser')
    
11. title = soup.select('div > a')
    
12. print(title)

复制代码

用select 可以

故梦L

你可以利用div里面的属性定位到该节点，再把节点从列表里取出来继续查找

taigefcxj

raimond 发表于 2018-8-9 18:11
用select 可以

感谢回复 用select可以达到效果  但是不用加 > 直接("div > li")即可

taigefcxj

故梦L 发表于 2018-8-9 18:56
你可以利用div里面的属性定位到该节点，再把节点从列表里取出来继续查找

感谢你的回复！请问用属性定位节点怎么写 麻烦大佬写个例子学习一下

故梦L

taigefcxj 发表于 2018-8-9 20:01
感谢你的回复！请问用属性定位节点怎么写 麻烦大佬写个例子学习一下

1. def parser(html):
   
2.     soup = BeautifulSoup(html,'html.parser')
   
3.     for div in soup.find('div', id="postlist").contents[5:]: #
   
4.         if isinstance(div, bs4.element.Tag):
   
5.             author = div.find('div',class_="authi")
   
6.             hui_tie = div.find('td', class_="t_f")

复制代码

https://fishc.com.cn/thread-120115-1-1.html