hudi介绍和使用
大数据大厂之 Hudi 数据湖框架性能提升：高效处理大数据变更
技术共享 • 数栈君 发表了文章 • 0 个评论 • 633 次浏览 • 2024-10-09 15:26
在之前对大数据技术的探索中，我们已经了解到大数据领域不断发展，各种技术和框架应运而生，以满足日益增长的数据处理需求。从之前讨论过的相关大数据技术和框架，我们看到了大数据处理在不同方向上的努力。例如，在数据查询方面，像 Presto 这样的工具为我们提供了高效的... ...查看全部
Hudi集成Spark
技术共享 • 数栈君 发表了文章 • 0 个评论 • 568 次浏览 • 2024-07-31 15:27
环境准备安装Spark1）Hudi支持的Spark版本HudiSupported Spark 3 version0.12.x3.3.x，3.2.x，3.1.x0.11.x3.2.x（default build, Spark bundle only），3.1.x... ...查看全部
Hudi（一）基本介绍
知识百科 • 群内解答 发表了文章 • 0 个评论 • 1643 次浏览 • 2023-11-22 15:03
1.1、介绍Overview | Apache Hudi!Welcome to Apache Hudi! This overview will provide a high level summary of what Apache Hudi is and wi... ...查看全部
hudi概念与设计介绍
知识百科 • 群内解答 发表了文章 • 0 个评论 • 775 次浏览 • 2023-11-22 15:02
hudi概念与设计介绍一、应用场景https://hudi.apache.org/docs/use_cases.html 近实时写入 减少碎片化工具的使用 CDC 增量导入 RDBMS 数据 限制小文件的大小和数... ...查看全部
大数据大厂之 Hudi 数据湖框架性能提升：高效处理大数据变更
技术共享 • 数栈君 发表了文章 • 0 个评论 • 633 次浏览 • 2024-10-09 15:26
在之前对大数据技术的探索中，我们已经了解到大数据领域不断发展，各种技术和框架应运而生，以满足日益增长的数据处理需求。从之前讨论过的相关大数据技术和框架，我们看到了大数据处理在不同方向上的努力。例如，在数据查询方面，像 Presto 这样的工具为我们提供了高效的... ...查看全部
Hudi集成Spark
技术共享 • 数栈君 发表了文章 • 0 个评论 • 568 次浏览 • 2024-07-31 15:27
环境准备安装Spark1）Hudi支持的Spark版本HudiSupported Spark 3 version0.12.x3.3.x，3.2.x，3.1.x0.11.x3.2.x（default build, Spark bundle only），3.1.x... ...查看全部
Hudi（一）基本介绍
知识百科 • 群内解答 发表了文章 • 0 个评论 • 1643 次浏览 • 2023-11-22 15:03
1.1、介绍Overview | Apache Hudi!Welcome to Apache Hudi! This overview will provide a high level summary of what Apache Hudi is and wi... ...查看全部
hudi概念与设计介绍
知识百科 • 群内解答 发表了文章 • 0 个评论 • 775 次浏览 • 2023-11-22 15:02
hudi概念与设计介绍一、应用场景https://hudi.apache.org/docs/use_cases.html 近实时写入 减少碎片化工具的使用 CDC 增量导入 RDBMS 数据 限制小文件的大小和数... ...查看全部
