鱼C论坛

 找回密码
 立即注册
查看: 1607|回复: 7

[已解决]求助啊!爬虫的问题

[复制链接]
发表于 2022-6-2 16:26:07 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
想抓取下面一段代码中<strong class></strong>之间的内容,要怎么才能抓取啊,大神们。
查看元素,里面是有数据的,如图,但是看源代码没有,这是为什么呢??要如果才能抓取到这个数据呢??
<div class="row notspacing level-size">
                    <div class="col-md-12">
                        <div class="ibox" style="margin-bottom: 10px;">
                            <div class="ibox-content">
                                <div class="today_people">
                                    <div class="row m-b-sm">
                                        <div class="col-md-12 level-text" id="total">
                                        </div>
                                    </div>
                                    <div class="row text-center m-b-sm">
                                        <div class="col-md-6">
                                            <strong class="text-danger level-text m-r-xs" id="enter"></strong>
                                        </div>
                                        <div class="col-md-6">
                                            <strong class="text-danger level-text m-r-xs" id="stay"></strong>
                                        </div>
                                    </div>
                                    <div class="row text-center m-b-sm">
                                        <div class="col-md-6">
                                            <strong class="text-danger level-text m-r-xs" id="enter_last_week"></strong>
                                        </div>
                                        <div class="col-md-6">
                                            <strong class="text-danger level-text m-r-xs" id="stay_last_week"></strong>
                                        </div>
                                    </div>
                                    <div class="row text-center">
                                        <button type="button" class="btn btn-success" onclick="emaps()" style="margin: 0;">电子地图</button>
                                    </div>
                                </div>
                            </div>
                        </div>
                    </div>

最佳答案
2022-6-3 17:34:28
你这个页面是实时渲染的,要用selenium,你可以看一下这篇文章,https://www.likecs.com/show-203523456.html
元素.jpg
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2022-6-2 16:30:18 | 显示全部楼层


js 动态渲染的,可以用 sselenium 加载页面

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2022-6-2 16:34:14 | 显示全部楼层
Twilight6 发表于 2022-6-2 16:30
js 动态渲染的,可以用 sselenium 加载页面

多了个 s ,是 selenium
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2022-6-2 16:36:56 | 显示全部楼层
Twilight6 发表于 2022-6-2 16:34
多了个 s ,是 selenium

能麻烦说详细点嘛?版主大大。能给段代码参考下吗?谢谢了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2022-6-2 21:46:15 | 显示全部楼层
发一下你要爬取的链接?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2022-6-3 07:37:34 | 显示全部楼层
liuzhengyuan 发表于 2022-6-2 21:46
发一下你要爬取的链接?

不好意思,是公司内部的网页,外部访问不了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2022-6-3 08:03:38 From FishC Mobile | 显示全部楼层
kerln888 发表于 2022-6-3 07:37
不好意思,是公司内部的网页,外部访问不了

那就只能你自己慢慢研究,别人也帮不了
因为要是有反爬的话,都需要抓包分析
现在只有你能抓包,所以也只有你能解决问题
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2022-6-3 17:34:28 | 显示全部楼层    本楼为最佳答案   
你这个页面是实时渲染的,要用selenium,你可以看一下这篇文章,https://www.likecs.com/show-203523456.html
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-11-18 01:24

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表