
精选·OLAP与存储2026-07-13
OLAP 引擎选型方法论:从数据量、并发、更新频率出发
OLAP 选型先定三个硬指标:数据量级与增速、查询并发与延迟要求、数据更新频率,再叠加 join 复杂度、团队运维能力和生态,用排除法收敛候选。
91学AI·6 阅读
共 4 篇文章

OLAP 选型先定三个硬指标:数据量级与增速、查询并发与延迟要求、数据更新频率,再叠加 join 复杂度、团队运维能力和生态,用排除法收敛候选。

讲清 Hive 的 Driver/Metastore/执行引擎三层结构,SQL 经解析、逻辑计划、优化、物理计划四个阶段编译成 MR/Spark 任务,掌握关键算子和优化点。

讲清 Broker、Controller、分区副本的角色分工,重点说透 ISR 的入列出列条件、HW 与 LEO 的关系,以及 ISR 为什么能在可靠性和可用性之间取平衡。

讲清 Flink 主从架构中 JobManager、TaskManager、Dispatcher、ResourceManager 的分工,以及 Task Slot、算子链这些资源与调度层面的关键概念。