网络爬虫问题

puzixia · 发表于 2018-8-31 09:23:12

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

您好，我想问一下，我在爬取某外国网站的时候发现该页面是动态加载的，于是我分析请求连接发现了json文件的requestURL，我构造了真正的网址并进行了请求。
但是它在获取的时候会跳转到未找到内容的页面，网页链接也自动改变了，使我获取不到json文件的内容。
QQ图片20180831091556.png

我应该如何解决这个问题呢，这里是被重定向了？还是被反爬虫了？
meta这里是被检测出来了吗
QQ图片20180831092151.png

luckin · 发表于 2018-8-31 16:10:06

网址是啥

账号		自动登录	找回密码
密码			立即注册