hudi

hudi

大数据大厂之 Hudi 数据湖框架性能提升:高效处理大数据变更

技术共享数栈君 发表了文章 • 0 个评论 • 124 次浏览 • 2024-10-09 15:26 • 来自相关话题

在之前对大数据技术的探索中,我们已经了解到大数据领域不断发展,各种技术和框架应运而生,以满足日益增长的数据处理需求。从之前讨论过的相关大数据技术和框架,我们看到了大数据处理在不同方向上的努力。例如,在数据查询方面,像 Presto 这样的工具为我们提供了高效的... ...查看全部

Hudi集成Spark

技术共享数栈君 发表了文章 • 0 个评论 • 191 次浏览 • 2024-07-31 15:27 • 来自相关话题

环境准备安装Spark1)Hudi支持的Spark版本HudiSupported Spark 3 version0.12.x3.3.x,3.2.x,3.1.x0.11.x3.2.x(default build, Spark bundle only),3.1.x... ...查看全部

实时湖仓技术选型,企业如何借实时湖仓赢在“数据驱动”时代——中

技术共享数栈君 发表了文章 • 0 个评论 • 264 次浏览 • 2023-12-20 11:53 • 来自相关话题

实时湖仓存储原理下文将从大数据常用技术和大数据存储常用理论两个方面为大家解析实时湖仓的存储原理。大数据常用技术分析Hive 事务表Hive 是基于 Hadoop 的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在 Hadoop... ...查看全部

使用spark操作hudi表

知识百科群内解答 发表了文章 • 0 个评论 • 220 次浏览 • 2023-11-22 15:04 • 来自相关话题

Hudi-数据湖

知识百科群内解答 发表了文章 • 0 个评论 • 262 次浏览 • 2023-11-22 15:03 • 来自相关话题

数据湖-hudi概述

知识百科群内解答 发表了文章 • 0 个评论 • 222 次浏览 • 2023-11-22 15:03 • 来自相关话题

Hudi(一)基本介绍

知识百科群内解答 发表了文章 • 0 个评论 • 856 次浏览 • 2023-11-22 15:03 • 来自相关话题

1.1、介绍Overview | Apache Hudi!Welcome to Apache Hudi! This overview will provide a high level summary of what Apache Hudi is and wi... ...查看全部

hudi概念与设计介绍

知识百科群内解答 发表了文章 • 0 个评论 • 393 次浏览 • 2023-11-22 15:02 • 来自相关话题

hudi概念与设计介绍一、应用场景https://hudi.apache.org/docs/use_cases.html 近实时写入 减少碎片化工具的使用 CDC 增量导入 RDBMS 数据 限制小文件的大小和数... ...查看全部

数据湖Hudi-2-Hudi基本概念

知识百科群内解答 发表了文章 • 0 个评论 • 189 次浏览 • 2023-11-22 15:00 • 来自相关话题

数据湖架构Hudi(三)Hudi核心概念

知识百科群内解答 发表了文章 • 0 个评论 • 196 次浏览 • 2023-11-22 14:59 • 来自相关话题

袋鼠云的数据湖解决方案选型的是那个框架?Hudi、Iceberg还是Delta Lake

数据中台群内解答 回复了问题 • 1 人关注 • 1 个回复 • 920 次浏览 • 2022-12-21 14:06 • 来自相关话题

老师有空帮忙看下哈,我只是想简单的配置flinksql读取es数据到mysql这样,但是实现失败

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 357 次浏览 • 2023-06-16 15:34 • 来自相关话题

我拉取了最新代码,还是报这个错误,请问这个是在哪个commit解决的

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 414 次浏览 • 2023-06-16 15:33 • 来自相关话题

老师问一下,es的source读取是需要什么特殊配置吗,

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 362 次浏览 • 2023-06-16 15:32 • 来自相关话题

有人编译过 impala么? https://native-toolchain.s3.amazonaws.com 官方的这个Maven 地址一直是403 有解决过的大佬么?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 426 次浏览 • 2023-06-16 15:31 • 来自相关话题

老师们,我在1.12.8上做logminner然后发现nameMapping配置了未能生效,输出还是原表信息,name mapping是不支持吗?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 365 次浏览 • 2023-06-16 15:30 • 来自相关话题

请教下有没有对flink 写入iceberg有经验的铁子,

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 297 次浏览 • 2023-06-16 15:30 • 来自相关话题

请教下,纯钧现在可以支持多个输出吗?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 350 次浏览 • 2023-06-16 15:29 • 来自相关话题

打扰各位老师 sink clickhouse 时 报错

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 364 次浏览 • 2023-06-16 15:28 • 来自相关话题

大数据大厂之 Hudi 数据湖框架性能提升:高效处理大数据变更

技术共享数栈君 发表了文章 • 0 个评论 • 124 次浏览 • 2024-10-09 15:26 • 来自相关话题

在之前对大数据技术的探索中,我们已经了解到大数据领域不断发展,各种技术和框架应运而生,以满足日益增长的数据处理需求。从之前讨论过的相关大数据技术和框架,我们看到了大数据处理在不同方向上的努力。例如,在数据查询方面,像 Presto 这样的工具为我们提供了高效的... ...查看全部

Hudi集成Spark

技术共享数栈君 发表了文章 • 0 个评论 • 191 次浏览 • 2024-07-31 15:27 • 来自相关话题

环境准备安装Spark1)Hudi支持的Spark版本HudiSupported Spark 3 version0.12.x3.3.x,3.2.x,3.1.x0.11.x3.2.x(default build, Spark bundle only),3.1.x... ...查看全部

实时湖仓技术选型,企业如何借实时湖仓赢在“数据驱动”时代——中

技术共享数栈君 发表了文章 • 0 个评论 • 264 次浏览 • 2023-12-20 11:53 • 来自相关话题

实时湖仓存储原理下文将从大数据常用技术和大数据存储常用理论两个方面为大家解析实时湖仓的存储原理。大数据常用技术分析Hive 事务表Hive 是基于 Hadoop 的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在 Hadoop... ...查看全部

使用spark操作hudi表

知识百科群内解答 发表了文章 • 0 个评论 • 220 次浏览 • 2023-11-22 15:04 • 来自相关话题

Hudi-数据湖

知识百科群内解答 发表了文章 • 0 个评论 • 262 次浏览 • 2023-11-22 15:03 • 来自相关话题

数据湖-hudi概述

知识百科群内解答 发表了文章 • 0 个评论 • 222 次浏览 • 2023-11-22 15:03 • 来自相关话题

Hudi(一)基本介绍

知识百科群内解答 发表了文章 • 0 个评论 • 856 次浏览 • 2023-11-22 15:03 • 来自相关话题

1.1、介绍Overview | Apache Hudi!Welcome to Apache Hudi! This overview will provide a high level summary of what Apache Hudi is and wi... ...查看全部

hudi概念与设计介绍

知识百科群内解答 发表了文章 • 0 个评论 • 393 次浏览 • 2023-11-22 15:02 • 来自相关话题

hudi概念与设计介绍一、应用场景https://hudi.apache.org/docs/use_cases.html 近实时写入 减少碎片化工具的使用 CDC 增量导入 RDBMS 数据 限制小文件的大小和数... ...查看全部

数据湖Hudi-2-Hudi基本概念

知识百科群内解答 发表了文章 • 0 个评论 • 189 次浏览 • 2023-11-22 15:00 • 来自相关话题

数据湖架构Hudi(三)Hudi核心概念

知识百科群内解答 发表了文章 • 0 个评论 • 196 次浏览 • 2023-11-22 14:59 • 来自相关话题