[已解决]关于bs的用法 find_all 如何使用多层查找条件

taigefcxj

我想查找 某个<div>标签下的全部<li>

发现 soup.find_all("div li") 就提取不到内容

用find_all直接找<li>就会把其他位置的 li 标签也找过来

请问 find_all 怎么样添加多层的查找条件呢？让他先找到 div 标签下 再把 li找出来 而不是全局的 li

最佳答案

月排行榜 / 总排行榜

raimond

2018-8-9 18:11:00

import requests
from bs4 import BeautifulSoup

headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 \
(KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}

url = 'http://bj.xiaozhu.com/'

res = requests.get(url, headers = headers)
soup = BeautifulSoup(res.text, 'html.parser')
title = soup.select('div > a')
print(title)

用select 可以

跳转到最佳答案楼层

raimond

import requests
from bs4 import BeautifulSoup

headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 \
(KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}

url = 'http://bj.xiaozhu.com/'

res = requests.get(url, headers = headers)
soup = BeautifulSoup(res.text, 'html.parser')
title = soup.select('div > a')
print(title)

用select 可以

故梦L

你可以利用div里面的属性定位到该节点，再把节点从列表里取出来继续查找

taigefcxj

raimond 发表于 2018-8-9 18:11
用select 可以

感谢回复 用select可以达到效果  但是不用加 > 直接("div > li")即可

taigefcxj

故梦L 发表于 2018-8-9 18:56
你可以利用div里面的属性定位到该节点，再把节点从列表里取出来继续查找

感谢你的回复！请问用属性定位节点怎么写 麻烦大佬写个例子学习一下

故梦L

taigefcxj 发表于 2018-8-9 20:01
感谢你的回复！请问用属性定位节点怎么写 麻烦大佬写个例子学习一下

def parser(html):
    soup = BeautifulSoup(html,'html.parser')
    for div in soup.find('div', id="postlist").contents[5:]: #
        if isinstance(div, bs4.element.Tag):
            author = div.find('div',class_="authi")
            hui_tie = div.find('td', class_="t_f")

https://fishc.com.cn/thread-120115-1-1.html