37 手游基于 Flink CDC + Hudi 湖仓一体方案实践

37 手游基于 Flink CDC + Hudi 湖仓一体方案实践

Hudi集成Spark

技术共享数栈君 发表了文章 • 0 个评论 • 568 次浏览 • 2024-07-31 15:27 • 来自相关话题

环境准备安装Spark1)Hudi支持的Spark版本HudiSupported Spark 3 version0.12.x3.3.x,3.2.x,3.1.x0.11.x3.2.x(default build, Spark bundle only),3.1.x... ...查看全部

海翼集团 X 袋鼠云:挖掘全场景业务数据价值,护航先进制造产业链发展

产品交流数栈君 发表了文章 • 0 个评论 • 690 次浏览 • 2023-11-16 10:41 • 来自相关话题

厦门海翼集团以聚焦“电子信息、高端装备、新能源新材料”三大产业链为核心,集聚千亿级产业规模,实施产业经营、产业投资、产业基金、产业园区“四轮驱动”运作模式,结合,成为“国内一流先进制造业投资平台,区域制造业发展核心引擎”,推动智能制造行业可持续发展。随着海翼集... ...查看全部

Flink CDC + Hudi 海量数据入湖在顺丰的实践

知识百科数栈君 发表了文章 • 0 个评论 • 375 次浏览 • 2023-11-15 11:39 • 来自相关话题

DevOps|从腾讯TEG CDC解散聊技术中台

知识百科数栈君 发表了文章 • 0 个评论 • 392 次浏览 • 2023-11-15 11:39 • 来自相关话题

Spring Boot+Flink CDC —— MySQL 同步 Elasticsearch (Table API方式)

知识百科数栈君 发表了文章 • 0 个评论 • 637 次浏览 • 2023-11-15 11:38 • 来自相关话题

Flink CDC + OceanBase 全增量一体化数据集成方案

知识百科数栈君 发表了文章 • 0 个评论 • 402 次浏览 • 2023-11-15 11:38 • 来自相关话题

37 手游基于 Flink CDC + Hudi 湖仓一体方案实践

知识百科数栈君 发表了文章 • 0 个评论 • 818 次浏览 • 2023-11-15 11:38 • 来自相关话题

一、Flink-CDC 2.0Flink CDC Connectors 是 Apache Flink 的一个 source 端的连接器,目前 2.0 版本支持从 MySQL 以及 Postgres 两种数据源中获取数据,2.1 版本社区确定会支持 Oracle... ...查看全部

海翼集团 X 袋鼠云:挖掘全场景业务数据价值,护航先进制造产业链发展

产品交流数栈君 发表了文章 • 0 个评论 • 690 次浏览 • 2023-11-16 10:41 • 来自相关话题

厦门海翼集团以聚焦“电子信息、高端装备、新能源新材料”三大产业链为核心,集聚千亿级产业规模,实施产业经营、产业投资、产业基金、产业园区“四轮驱动”运作模式,结合,成为“国内一流先进制造业投资平台,区域制造业发展核心引擎”,推动智能制造行业可持续发展。随着海翼集... ...查看全部

Hudi集成Spark

技术共享数栈君 发表了文章 • 0 个评论 • 568 次浏览 • 2024-07-31 15:27 • 来自相关话题

环境准备安装Spark1)Hudi支持的Spark版本HudiSupported Spark 3 version0.12.x3.3.x,3.2.x,3.1.x0.11.x3.2.x(default build, Spark bundle only),3.1.x... ...查看全部

海翼集团 X 袋鼠云:挖掘全场景业务数据价值,护航先进制造产业链发展

产品交流数栈君 发表了文章 • 0 个评论 • 690 次浏览 • 2023-11-16 10:41 • 来自相关话题

厦门海翼集团以聚焦“电子信息、高端装备、新能源新材料”三大产业链为核心,集聚千亿级产业规模,实施产业经营、产业投资、产业基金、产业园区“四轮驱动”运作模式,结合,成为“国内一流先进制造业投资平台,区域制造业发展核心引擎”,推动智能制造行业可持续发展。随着海翼集... ...查看全部

Flink CDC + Hudi 海量数据入湖在顺丰的实践

知识百科数栈君 发表了文章 • 0 个评论 • 375 次浏览 • 2023-11-15 11:39 • 来自相关话题

DevOps|从腾讯TEG CDC解散聊技术中台

知识百科数栈君 发表了文章 • 0 个评论 • 392 次浏览 • 2023-11-15 11:39 • 来自相关话题

Spring Boot+Flink CDC —— MySQL 同步 Elasticsearch (Table API方式)

知识百科数栈君 发表了文章 • 0 个评论 • 637 次浏览 • 2023-11-15 11:38 • 来自相关话题

Flink CDC + OceanBase 全增量一体化数据集成方案

知识百科数栈君 发表了文章 • 0 个评论 • 402 次浏览 • 2023-11-15 11:38 • 来自相关话题

37 手游基于 Flink CDC + Hudi 湖仓一体方案实践

知识百科数栈君 发表了文章 • 0 个评论 • 818 次浏览 • 2023-11-15 11:38 • 来自相关话题

一、Flink-CDC 2.0Flink CDC Connectors 是 Apache Flink 的一个 source 端的连接器,目前 2.0 版本支持从 MySQL 以及 Postgres 两种数据源中获取数据,2.1 版本社区确定会支持 Oracle... ...查看全部