wp231957 发表于 2020-11-27 15:11:10

爬虫时,碰到一个不大不小的小问题

这是一个小说网站(网址不方便透漏,请谅解)

打开每一个章节内容时,会出现   正在转码。。。。请稍后   的字样大约也就1-3秒钟,正常章节内容就显示到浏览器了

可是我们用rest=requests.get(x)所获取的网页内容就是 正在转码。。。。请稍后

另:F12 是看不到   正在转码。。。。请稍后   这个东东的

suchocolate 发表于 2020-11-27 15:40:32

看起来是ajax,或者js做的假象,数据在别的文档里,你再看看加载的html或js或者xhr有没有东西吧,如果不给url,只能文字提示你。

YunGuo 发表于 2020-11-28 02:19:48

不给url怎么解决问题?你先看看查看网页源代码有没有你想要的内容,如果没有那就可能是js动态加载的,或者也有可能是网页做了其它反爬措施。
页: [1]
查看完整版本: 爬虫时,碰到一个不大不小的小问题