BeautifulSoup 如何分获取某个div里面的子元素

ovsexia

例如：

1. import urllib.request
   
2. from bs4 import BeautifulSoup
   
3. 
   
4. url = 'http://www.baidu.com'
   
5. 
   
6. #头部信息
   
7. def copyhead():
   
8.     headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36'}
   
9.     req = urllib.request.Request(url,headers=headers)
   
10.     page = urllib.request.urlopen(req,timeout=20)
    
11.     contents = page.read()
    
12.     soup = BeautifulSoup(contents,'html.parser')
    
13.     return soup
    
14. 
    
15. 
    
16. #抓取
    
17. def copyimg(url):
    
18.     soup = copyhead()
    
19.    
    
20.     baidu = soup.find_all('div',id='lg')
    
21.     print(baidu)
    
22. 
    
23.     #如何再继续获取 <div id='lg'></div> 里面的图片
    
24. 
    
25. copyimg(url)

复制代码

如何再继续获取 <div id='lg'></div> 里面的图片

ovsexia

自己解决了

1. baidu = soup.find('div',id='lg').find_all('img')

复制代码

第一个不能用 find_all 只能用find，后面的才能用 find_all

MadJoker

你好,你这里存在一个小小的误区,并非是不能用find_all()方法,find_all()方法是用来查找所有符合该条件的元素,并将其以列表的形式返回。所以我们需要将里面装的元素提取出来,其类型为Tag类型,然后再使用find()获取即可。修正后的代码如下:

1. import urllib.request
   
2. from bs4 import BeautifulSoup
   
3. 
   
4. url = 'http://www.baidu.com'
   
5. 
   
6. #头部信息
   
7. def copyhead():
   
8.     headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36'}
   
9.     req = urllib.request.Request(url,headers=headers)
   
10.     page = urllib.request.urlopen(req,timeout=20)
    
11.     contents = page.read()
    
12.     soup = BeautifulSoup(contents,'html.parser')
    
13.     return soup
    
14. 
    
15. 
    
16. #抓取
    
17. def copyimg(url):
    
18.     soup = copyhead()
    
19.     print(type(soup))
    
20.     baidu = soup.find_all('div',id='lg')[0].find(name='img').attrs['src']
    
21.     print(baidu)
    
22. 
    
23. copyimg(url)
    

复制代码