
精选·Spark2026-07-13
Spark AQE(自适应查询执行)有哪三大优化能力?原理是什么?
考察对 Spark 3.x AQE 的理解:运行时利用 shuffle 物化后的真实统计,动态合并小分区、切换 join 策略(SMJ 转 BHJ)、拆分倾斜分区,解决计划阶段统计不准的问题。
91学AI·6 阅读
共 1 篇文章

考察对 Spark 3.x AQE 的理解:运行时利用 shuffle 物化后的真实统计,动态合并小分区、切换 join 策略(SMJ 转 BHJ)、拆分倾斜分区,解决计划阶段统计不准的问题。