[已解决]xapth提取不了文本

tt520

import requests
from lxml import etree
res=requests.get('https://www.pearvideo.com/')
#print(res.text)

res_xpath=etree.HTML(res.text)
res_xpath.xpath('/html/body/div[2]/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()')
print(res_xpath)



/text()不是应该把我的那个<Element html at 0x158c0be8c08>转换成文字嘛，但是运行结果还是这种

最佳答案

月排行榜 / 总排行榜

foxiangzun

2019-11-5 15:41:55

你没把内容赋值出来，以下是我这边的测试结果，亲测，有效

1. import requests
   
2. from lxml import etree
   
3. 
   
4. url = r'https://www.pearvideo.com/'
   
5. headers = {
   
6.         'user-agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64)'
   
7. }
   
8. response = requests.get(url, headers=headers)
   
9. webcontent = etree.HTML(response.text)
   
10. cententce = webcontent.xpath("/html/body/div[2]/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()")
    
11. print(cententce)

复制代码

另外，xpath 里面的内容尽量不要用单引号，用双引号更好，如果碰上需要引用指定的标签，且标签带了值，可以直接用单引号把值包裹起来，cententce 那一段也可以写成下面的样子：

1. cententce = webcontent.xpath("//div[@class='act-main cmmain']/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()")

复制代码

跳转到最佳答案楼层

暗pluto

你浏览器上xpath路径能提取到文本吗，如果不行，那在python中自然也不行

wp231957

要提取哪部分数据

foxiangzun

你没把内容赋值出来，以下是我这边的测试结果，亲测，有效

1. import requests
   
2. from lxml import etree
   
3. 
   
4. url = r'https://www.pearvideo.com/'
   
5. headers = {
   
6.         'user-agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64)'
   
7. }
   
8. response = requests.get(url, headers=headers)
   
9. webcontent = etree.HTML(response.text)
   
10. cententce = webcontent.xpath("/html/body/div[2]/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()")
    
11. print(cententce)

复制代码

另外，xpath 里面的内容尽量不要用单引号，用双引号更好，如果碰上需要引用指定的标签，且标签带了值，可以直接用单引号把值包裹起来，cententce 那一段也可以写成下面的样子：

1. cententce = webcontent.xpath("//div[@class='act-main cmmain']/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()")

复制代码

danteer

import requests
from lxml import etree
res=requests.get('https://www.pearvideo.com/')
#print(res.text)

res_xpath=etree.HTML(res.text)
res_xpath = res_xpath.xpath('/html/body/div[2]/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()')
print(res_xpath)

Xpath语句是没问题的，xpath方法用错了

geen

首先看到的问题是这句 res_xpath.xpath('/html/body/div[2]/div[2]/div/ul[2]/li[1]/div/a/div[2]/div[2]/text()')  ，使用xpath()方法处理对象res_xpath后，没有进行赋值操作，没有赋值操作的话，一旦执行下一句语句的时候，res_xpath.xpath()的值会被清空。