设为首页收藏本站

切换到窄版

鱼C论坛 › DAY › 日志

DAY

https://fishc.com.cn/?338231

数仓采集-集群资源规划设计

已有 498 次阅读2019-9-23 16:49 |个人分类:数仓

1)如何确定集群规模？（假设：每台服务器8T磁盘，128G内存）

1.1 每天日活跃用户100万，每人一天平均100条：10000万条

1.2 每天日志1k左右，每天1亿条：约100G

1.3 半年内不扩容服务器来算：约18T

1.4 保存3个副本：54T

1.5 预留20%-30%buf：约77T

1.6 算到这：约10台服务器

2）如何考虑数仓分层？

服务器将近在扩容1-2倍，

收藏分享邀请举报

全部作者的其他最新日志

评论 (0 个评论)

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-5-6 12:47

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

返回顶部