braga 发表于 2020-11-12 00:48:51

js动态加载图片爬取

我在爬取猫眼电影TOP榜单的时候 遇到了图片是有占位符表示 通过js动态插入标签加载的图片请问如何不用webdriver 拿到图片的URL啊
谢谢好心人帮忙{:5_108:}

kogawananari 发表于 2020-11-12 00:58:17

浏览器录制NETwork寻找API接口

braga 发表于 2020-11-12 01:05:48

大佬 大佬 什么是API接口啊
我在network 里面看到一个一直在pending的 是不是它呀

braga 发表于 2020-11-12 01:38:56

kogawananari 发表于 2020-11-12 00:58
浏览器录制NETwork寻找API接口

我好像有点明白了 我看图片加载的initiator 都是一个js文件,这个图片的url构造方法是不是在这个js文件中能找到呀

kogawananari 发表于 2020-11-12 08:14:06

braga 发表于 2020-11-12 01:38
我好像有点明白了 我看图片加载的initiator 都是一个js文件,这个图片的url构造方法是不是在这个js文件中 ...

你要找构造前的图片的url列表 这个一般是XHR里面

suchocolate 发表于 2020-11-12 08:26:21

直接能拿到图片:

braga 发表于 2020-11-12 09:20:46

suchocolate 发表于 2020-11-12 08:26
直接能拿到图片:

确实可以额 我太愚蠢了光看加载出的图片的标签了 原来没加载出来 直接就有写{:5_106:}

braga 发表于 2020-11-12 09:25:04

kogawananari 发表于 2020-11-12 08:14
你要找构造前的图片的url列表 这个一般是XHR里面

谢谢大佬了 我好像明白了{:5_105:}
页: [1]
查看完整版本: js动态加载图片爬取