鱼C论坛

 找回密码
 立即注册
查看: 1012|回复: 6

[已解决]有没有爬虫比较简单的入门介绍

[复制链接]
发表于 2020-5-25 10:26:44 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
零基础入门爬虫那种
最佳答案
2020-5-25 10:40:46
本帖最后由 Twilight6 于 2020-5-25 10:42 编辑

https://www.bilibili.com/video/BV1z541167mu/?p=25

这个教程视频很赞

配合视频  这边的笔记拿去用

数据提取——网络爬虫



数据提取主要有这些:

正则表达式

Beautiful Soup

XPath

JsonPath

PyQuery

Scrapy、Selenium 也可以提取数据

Selenium 可用访问网站并返回JS被渲染后的网站

建议也学学:

爬虫多线程

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-5-25 10:39:54 | 显示全部楼层
先学bs4  xpath  一类的静态爬,就是网站让你爬  不加干扰措施的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-25 10:40:46 | 显示全部楼层    本楼为最佳答案   
本帖最后由 Twilight6 于 2020-5-25 10:42 编辑

https://www.bilibili.com/video/BV1z541167mu/?p=25

这个教程视频很赞

配合视频  这边的笔记拿去用

数据提取——网络爬虫



数据提取主要有这些:

正则表达式

Beautiful Soup

XPath

JsonPath

PyQuery

Scrapy、Selenium 也可以提取数据

Selenium 可用访问网站并返回JS被渲染后的网站

建议也学学:

爬虫多线程

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-25 10:41:40 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-5-25 10:54:42 | 显示全部楼层
Twilight6 发表于 2020-5-25 10:40
https://www.bilibili.com/video/BV1z541167mu/?p=25

这个教程视频很赞

好滴,谢谢。可是上班中不能看视频,好遗憾
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-5-25 10:56:23 | 显示全部楼层
HDP1008 发表于 2020-5-25 10:54
好滴,谢谢。可是上班中不能看视频,好遗憾

没事 下班回去再学习~
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-5-25 11:02:52 | 显示全部楼层
Twilight6 发表于 2020-5-25 10:56
没事 下班回去再学习~

是滴
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-21 00:54

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表