ORC格式合并
Hive SQL小文件合并优化方案
知识百科 • 数栈君 发表了文章 • 0 个评论 • 50 次浏览 • 2026-03-28 17:15
在大数据处理与数据中台建设中，Hive SQL 作为核心的批处理引擎，广泛应用于日志分析、用户行为建模、指标计算等关键场景。然而，随着数据量持续增长和任务调度频繁，Hive 表中常出现大量小文件（通常指小于 HDFS 块大小 128MB 或 256MB 的文件... ...查看全部
Hive SQL小文件合并优化方案
知识百科 • 数栈君 发表了文章 • 0 个评论 • 50 次浏览 • 2026-03-28 17:15
在大数据处理与数据中台建设中，Hive SQL 作为核心的批处理引擎，广泛应用于日志分析、用户行为建模、指标计算等关键场景。然而，随着数据量持续增长和任务调度频繁，Hive 表中常出现大量小文件（通常指小于 HDFS 块大小 128MB 或 256MB 的文件... ...查看全部
