批流一体架构

批流一体架构

Doris批量导入优化:StreamLoad并行调优

知识百科数栈君 发表了文章 • 0 个评论 • 67 次浏览 • 2026-03-30 15:03 • 来自相关话题

在现代数据中台架构中,批量数据导入的效率直接决定了数据服务的时效性与系统稳定性。Apache Doris(原Apache DorisDB)作为一款高性能、实时分析型数据库,广泛应用于数字孪生、实时报表、用户行为分析等场景。其核心优势之一是支持多种导入方式,其中... ...查看全部

Hive SQL小文件合并优化方案

知识百科数栈君 发表了文章 • 0 个评论 • 44 次浏览 • 2026-03-26 21:38 • 来自相关话题

在大数据处理架构中,Hive 作为数据仓库的核心引擎,广泛应用于企业级数据中台、数字孪生建模与可视化分析系统。然而,随着数据写入频率的提升和任务调度的复杂化,Hive 表中频繁出现大量小文件(通常指小于 HDFS 块大小 128MB 或 256MB 的文件),... ...查看全部

Doris批量导入优化:StreamLoad并行调优

知识百科数栈君 发表了文章 • 0 个评论 • 67 次浏览 • 2026-03-30 15:03 • 来自相关话题

在现代数据中台架构中,批量数据导入的效率直接决定了数据服务的时效性与系统稳定性。Apache Doris(原Apache DorisDB)作为一款高性能、实时分析型数据库,广泛应用于数字孪生、实时报表、用户行为分析等场景。其核心优势之一是支持多种导入方式,其中... ...查看全部

Hive SQL小文件合并优化方案

知识百科数栈君 发表了文章 • 0 个评论 • 44 次浏览 • 2026-03-26 21:38 • 来自相关话题

在大数据处理架构中,Hive 作为数据仓库的核心引擎,广泛应用于企业级数据中台、数字孪生建模与可视化分析系统。然而,随着数据写入频率的提升和任务调度的复杂化,Hive 表中频繁出现大量小文件(通常指小于 HDFS 块大小 128MB 或 256MB 的文件),... ...查看全部