[已解决]有些网页获取不到全部内容怎么办？

def花 · 发表于 2020-8-25 08:02:25

您需要登录才可以下载或查看，没有账号？立即注册

x

复制代码

输出的是

<html>
<head>
<script>
location.replace(location.href.replace("https://","http://"));
</script>
</head>
<body>
<noscript><meta http-equiv="refresh" content="0;url=http://www.baidu.com/"></noscript>
</body>
</html>

复制代码

明明有很多东西就是出不来www

最佳答案

1q23w31

2020-8-25 08:14:42

def花发表于 2020-8-25 08:05
这一大堆我都想要

百度首页涉及js，关闭js后访问如下图：（如需获取百度主页全部源代码，建议使用selenium爬取）
2020-8-25 8-12-56.png

_2_ · 发表于 2020-8-25 08:03:18

你想要的内容是什么？

def花 · 发表于 2020-8-25 08:05:14

_2_ 发表于 2020-8-25 08:03
你想要的内容是什么？

这一大堆我都想要

1q23w31 · 发表于 2020-8-25 08:14:42

def花发表于 2020-8-25 08:05
这一大堆我都想要

百度首页涉及js，关闭js后访问如下图：（如需获取百度主页全部源代码，建议使用selenium爬取）
2020-8-25 8-12-56.png

def花 · 发表于 2020-8-25 08:30:21

1q23w31 发表于 2020-8-25 08:14
百度首页涉及js，关闭js后访问如下图：（如需获取百度主页全部源代码，建议使用selenium爬取）

怎么关闭？打开上面的网站吗

1q23w31 · 发表于 2020-8-25 08:31:28

本帖最后由 1q23w31 于 2020-8-25 08:32 编辑

def花发表于 2020-8-25 08:30
怎么关闭？打开上面的网站吗

浏览器设置里找找关闭js功能，怎么在这个帖子里又问一遍

1q23w31 · 发表于 2020-8-25 08:55:06

1q23w31 发表于 2020-8-25 08:31
浏览器设置里找找关闭js功能，怎么在这个帖子里又问一遍

或着安装这个扩展

新建.zip (252.92 KB, 下载次数: 2)

suchocolate · 发表于 2020-8-25 10:19:08

改用selenium：

复制代码

def花 · 发表于 2020-8-25 10:34:57

1q23w31 发表于 2020-8-25 08:55
或着安装这个扩展

这个怎么用的？
浏览器禁用js在哪
js是个什么鬼

1q23w31 · 发表于 2020-8-25 10:35:48

def花发表于 2020-8-25 10:34
这个怎么用的？
浏览器禁用js在哪
js是个什么鬼

私聊我

1q23w31 · 发表于 2020-8-25 10:44:55

def花发表于 2020-8-25 10:34
这个怎么用的？
浏览器禁用js在哪
js是个什么鬼

看一下消息

zcy1ycz · 发表于 2020-8-25 10:53:36

印象中是请求头的问题把浏览器的请求头复制过来就好了

账号		自动登录	找回密码
密码			立即注册