鱼C论坛

 找回密码
 立即注册
查看: 1323|回复: 5

[已解决]爬虫系列

[复制链接]
发表于 2020-3-23 21:41:39 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
是不是我学艺不精,还是现在爬虫门槛高,为毛我一样东西都爬不了
最佳答案
2020-3-23 22:43:26
看你爬什么网站了 如果说想找史诗级难度的 可以去12306试一试

如果只是简单前期学习爬虫的 你可以去爬取妹子图这些网站 基本反爬等于形同虚设 但是你的知道如何破解这个反爬

爬点那种别人自己搭建小说网站 你可以拿来试试手 基本很简单的 一个请求库 一个解析库 一个文件保存就完事了

不要去网上找那些别人做的 你只能做个参考 别人写代码都是以自己的理解方式 和自己的写代码风格写的 所以仅供参考

爬虫讲实话学的东西很多  但是如果你现在属于刚接触的话 爬点那些小网站肯定是可以的 不要气馁! 现在先不要去挑战那些有反爬的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-3-23 22:08:10 | 显示全部楼层
什么叫一样东西都爬不了?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-3-23 22:26:26 From FishC Mobile | 显示全部楼层
现在各大网站都在做反爬
所以静态爬取已经日落西山了
会几行正则,会写点xpath表达式,就狠威武的时代已经过去式了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-3-23 22:43:26 | 显示全部楼层    本楼为最佳答案   
看你爬什么网站了 如果说想找史诗级难度的 可以去12306试一试

如果只是简单前期学习爬虫的 你可以去爬取妹子图这些网站 基本反爬等于形同虚设 但是你的知道如何破解这个反爬

爬点那种别人自己搭建小说网站 你可以拿来试试手 基本很简单的 一个请求库 一个解析库 一个文件保存就完事了

不要去网上找那些别人做的 你只能做个参考 别人写代码都是以自己的理解方式 和自己的写代码风格写的 所以仅供参考

爬虫讲实话学的东西很多  但是如果你现在属于刚接触的话 爬点那些小网站肯定是可以的 不要气馁! 现在先不要去挑战那些有反爬的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-24 09:12:52 | 显示全部楼层
admintest166 发表于 2020-3-23 22:43
看你爬什么网站了 如果说想找史诗级难度的 可以去12306试一试

如果只是简单前期学习爬虫的 你可以去爬 ...

ojbk,我去爬小说去
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-3-24 09:13:38 | 显示全部楼层
wp231957 发表于 2020-3-23 22:26
现在各大网站都在做反爬
所以静态爬取已经日落西山了
会几行正则,会写点xpath表达式,就狠威武的时代已 ...

看来我技术还不行,
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-11-25 08:27

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表