鱼C论坛

 找回密码
 立即注册
查看: 2906|回复: 6

[经验总结] python知多少2-爬虫是什么呢?

[复制链接]
发表于 2019-8-11 09:23:44 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
爬虫是什么呢?

平时生活中,可能听到很多人在讲爬虫,
但是关于爬虫是什么,可以做什么等等,并不是那么清楚。今天就聊一聊爬虫“这只特殊的虫子”!


爬虫,即网络爬虫,也叫做网络机器人,可以代替人们自动地在互联网中进行数据信息的采集与整理


可以把它理解为在网络上爬行的一只蜘蛛,互联网就比作一张大网,而爬虫便是在这张网上爬来爬去的蜘蛛,如果它遇到自己的猎物(所需要的资源),那么它就会将其抓取下来。

爬虫就是一个探测机器,它的基本操作就是模拟人的行为去各个网站溜达,点点按钮,查查数据,或者把看到的信息背回来。就像一只不知疲倦的机器虫在楼里爬来爬去。

你可以简单的想象:每个爬虫都是你的“分身”,你就是孙悟空,拔起一撮汗毛,吹出一堆猴子。

所以我们经常说,爬虫能通过网址获得网络中的数据、然后根据目标解析数据、存储目标信息,可以节省大量的人力物力。

简单地说,网络爬虫就是获取互联网公开数据的自动化工具,别告诉我你没有接触过爬虫,比如百度、google,它们本质上就是超级爬虫,

百度搜索引擎的爬虫叫作百度蜘蛛。

百度蜘蛛每天会在海量的互联网信息中进行爬取,爬取优质信息并收录,当用户在百度搜索引擎上检索对应关键词时,百度将对关键词进行分析处理,从收录的网页中找出相关网页,按照一定的排名规则进行排序并将结果展现给用户。


大数据时代是离不开爬虫的。

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2019-8-11 09:33:05 | 显示全部楼层
本帖最后由 panpancaker 于 2019-8-11 09:34 编辑


                               
登录/注册后可看大图
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-8-11 10:09:10 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-8-11 13:42:21 | 显示全部楼层

想问一下,图片怎么上传啊,我不会弄这个。点了图片那个小logo,要填什么地址,晕(((φ(◎ロ◎;)φ)))
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-8-11 14:19:00 | 显示全部楼层

我刷新了十几次网页,以为是我的网的问题,
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-8-11 14:38:32 | 显示全部楼层
yongever 发表于 2019-8-11 14:19
我刷新了十几次网页,以为是我的网的问题,

哈哈哈哈,不过你们可以发图片吗,我好困惑啊
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-8-11 18:02:30 | 显示全部楼层
panpancaker 发表于 2019-8-11 14:38
哈哈哈哈,不过你们可以发图片吗,我好困惑啊

O:\麻袋2
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-11-22 04:15

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表