[已解决]求助xpath问题，有id和class时怎么写？

jjxx2005

我想提取每一个<li>标签中<img>中的src属性

tree.xpath('//div[@class="proLis"]//img/@src')

这样写不行，他还有个id   请问像这种div里面有id和class的怎么办？

1. import requests
   
2. import os
   
3. from lxml import etree
   
4. # 创建一个文件夹，保存所有图片
   
5. if not os.path.exists('./海报'):
   
6.     os.mkdir('./海报')   
   
7. url = 'http://www.jkl.com.cn/cn/phoLis.aspx?id=697'
   
8. for i in range(1,5):
   
9.     data = {'__EVENTARGUMENT':'i'}
   
10.     UA伪装 = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.92 Safari/537.36'}
    
11.     响应数据 = requests.get(url=url,params=data,headers=UA伪装).text
    
12.     tree = etree.HTML(响应数据)
    
13.     标签列表 = tree.xpath('//div[@class="proLis"]//img/@src')
    
14.     print(标签列表)

复制代码

现在返回的都是空列表

最佳答案

月排行榜 / 总排行榜

suchocolate

2020-4-15 12:02:53

我稍稍改了改，可以的，另外字典data的i不要带引号。

1. import requests
   
2. import os
   
3. from lxml import etree
   
4. 
   
5. # 创建一个文件夹，保存所有图片
   
6. if not os.path.exists('post'):
   
7.     os.mkdir('post')
   
8. url = 'http://www.jkl.com.cn/cn/phoLis.aspx?id=697'
   
9. for i in range(1, 5):
   
10.     data = {'__EVENTARGUMENT': i}
    
11.     headers = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.92 Safari/537.36'}
    
12.     r = requests.get(url=url, params=data, headers=headers)
    
13.     html = etree.HTML(r.text)
    
14.     result = html.xpath('//div[@class="proLis"]//img/@src')
    
15.     print(result)

复制代码

跳转到最佳答案楼层

qiuyouzhi

用BS

jjxx2005

qiuyouzhi 发表于 2020-4-15 11:24
用BS

BS4我会用，那个简单  我现在学xpath

jjxx2005

qiuyouzhi 发表于 2020-4-15 11:24
用BS

    soup = BeautifulSoup(响应数据,'lxml')
    标签列表 = soup.select('.proLis > ul > li')

Bs4 我已经成功搞定，但是xpath不懂

suchocolate

写的没错

jjxx2005

suchocolate 发表于 2020-4-15 11:44
写的没错

可是返回的都是空列表。。。

wp231957

jjxx2005 发表于 2020-4-15 11:47
可是返回的都是空列表。。。

有id的和class的，用一个就可以了
不过id 是唯一的，class却是可能有重复的

suchocolate

我稍稍改了改，可以的，另外字典data的i不要带引号。

1. import requests
   
2. import os
   
3. from lxml import etree
   
4. 
   
5. # 创建一个文件夹，保存所有图片
   
6. if not os.path.exists('post'):
   
7.     os.mkdir('post')
   
8. url = 'http://www.jkl.com.cn/cn/phoLis.aspx?id=697'
   
9. for i in range(1, 5):
   
10.     data = {'__EVENTARGUMENT': i}
    
11.     headers = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.92 Safari/537.36'}
    
12.     r = requests.get(url=url, params=data, headers=headers)
    
13.     html = etree.HTML(r.text)
    
14.     result = html.xpath('//div[@class="proLis"]//img/@src')
    
15.     print(result)

复制代码

jjxx2005

wp231957 发表于 2020-4-15 12:01
有id的和class的，用一个就可以了
不过id 是唯一的，class却是可能有重复的

我用哪个都返回空列表

兢兢

tree.xpath('//div[@class="proLis"]/ul/li/a/img/@src')