爬虫时,碰到一个不大不小的小问题
这是一个小说网站(网址不方便透漏,请谅解)打开每一个章节内容时,会出现 正在转码。。。。请稍后 的字样大约也就1-3秒钟,正常章节内容就显示到浏览器了
可是我们用rest=requests.get(x)所获取的网页内容就是 正在转码。。。。请稍后
另:F12 是看不到 正在转码。。。。请稍后 这个东东的 看起来是ajax,或者js做的假象,数据在别的文档里,你再看看加载的html或js或者xhr有没有东西吧,如果不给url,只能文字提示你。 不给url怎么解决问题?你先看看查看网页源代码有没有你想要的内容,如果没有那就可能是js动态加载的,或者也有可能是网页做了其它反爬措施。
页:
[1]