大家好新手想请教几个关于网页/爬虫的问题

littlewhite · 发表于 2017-6-21 20:17:57

您需要登录才可以下载或查看，没有账号？立即注册

x

请问一下可以用爬虫把整个网页扒下来吗。具体要怎么实现啊？以国服我的世界官网为例的话有可能扒下来吗

新手·ing · 发表于 2017-6-21 21:52:57

能
你去看小甲鱼爬虫视频第一课
那个就是万能爬虫模板

yongxi · 发表于 2017-6-21 22:16:07

看视频！视频已经教你怎么爬取整个网页了

gopythoner · 发表于 2017-6-22 09:57:27

整个网页？
你必须确定网页中你要的信息才能开始思考怎么爬
因为网页中不同的信息构成可能不一样，有的在源代码中有的不在
所有信息必须具体

littlewhite · 发表于 2017-6-23 18:57:15

gopythoner 发表于 2017-6-22 09:57
整个网页？
你必须确定网页中你要的信息才能开始思考怎么爬
因为网页中不同的信息构成可能不一样，有的在 ...

我想爬那个大概是用webGL做的动画

littlewhite · 发表于 2017-6-23 18:58:00

新手·ing 发表于 2017-6-21 21:52
能
你去看小甲鱼爬虫视频第一课
那个就是万能爬虫模板

好我这就去研究

账号		自动登录	找回密码
密码			立即注册

大家好 新手想请教几个关于网页/爬虫的问题