scrapy爬取网页浮窗信息xpath总是返回none

jf199073

求助大佬，为什么使用scrapy爬取网页中的浮窗信息时，xpath总是返回空值。

这是按照标签写的代码，确定没有错
g = b.xpath('./h3/a/div[@class="info-detail"]')
h=g.xpath('./div[@class="detail-bottom"]/text()')
print('g=',g)
print('h=',h)

执行结果：
g= [<Selector xpath='./h3/a/div[@class="info-detail"]' data='<div class="info-detail"></div>'>]
h= []

上面的h就是想要获取的含有浮窗信息的位置，明明在html中是能看到的，但是为什么xpath获取不到呢？

wp231957

原始URL 呢

jf199073

wp231957 发表于 2019-7-19 15:49
原始URL 呢

https://www.zhipin.com/c101280100/h_101280100/
这个招聘网页面，鼠标移至招聘岗位上能看到浮窗信息

wongyusing

还没加载js吧，你要确保你看的是网页源代码，而不是网页元素选择器

jf199073

wongyusing 发表于 2019-7-19 17:28
还没加载js吧，你要确保你看的是网页源代码，而不是网页元素选择器

我明白了我的确一直用的是“审查元素”，用“查看源代码”的确就看不到那段标签内容了，多谢！