向量化执行

向量化执行

快手自研Spark向量化引擎正式发布,性能提升200%

技术共享数栈君 发表了文章 • 0 个评论 • 840 次浏览 • 2024-09-23 14:52 • 来自相关话题

Blaze 是快手自研的基于Rust语言和DataFusion框架开发的Spark向量化执行引擎,旨在通过本机矢量化执行技术来加速Spark SQL的查询处理。Blaze在快手内部上线的数仓生产作业也观测到了平均30%的算力提升,实现了较大的降本增效。本文将深... ...查看全部

快手自研Spark向量化引擎正式发布,性能提升200%

技术共享数栈君 发表了文章 • 0 个评论 • 840 次浏览 • 2024-09-23 14:52 • 来自相关话题

Blaze 是快手自研的基于Rust语言和DataFusion框架开发的Spark向量化执行引擎,旨在通过本机矢量化执行技术来加速Spark SQL的查询处理。Blaze在快手内部上线的数仓生产作业也观测到了平均30%的算力提升,实现了较大的降本增效。本文将深... ...查看全部