数据湖技术之iceberg

技术共享 • 数栈君发表了文章 • 0 个评论 • 358 次浏览 • 2024-06-27 19:20 • 来自相关话题

1、概述 Iceberg 是一个面向海量数据分析场景的开放表格式（Table Format）。表格式（Table Format）可以理解为元数据以及数据文件的一种组织方式，处于计算框架（Flink，Spark...）之下，数据文件之上。2、... ...查看全部

知识百科 • 数栈君发表了文章 • 0 个评论 • 330 次浏览 • 2024-01-17 10:34 • 来自相关话题

一、概述本文以 kafka_2.5.1 版本为例，描述的常用命令，在 3.x 版本上命令有所不同。二、主要命令kafka 启动命令：nohup bin/kafka-server-start.sh config/server.properties &1k... ...查看全部

知识百科 • 数栈君发表了文章 • 0 个评论 • 293 次浏览 • 2024-01-15 10:40 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 466 次浏览 • 2024-01-15 10:39 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 527 次浏览 • 2024-01-15 10:38 • 来自相关话题

1.1 概述为了解决数据存储和计算引擎之间的适配的问题，Netflix开发了Iceberg，2018年11月16日进入Apache孵化器，2020 年5月19日从孵化器毕业，成为Apache的顶级项目。Iceberg是一个面向海量数据分析场景的开放表格式（Ta... ...查看全部

知识百科 • 数栈君发表了文章 • 0 个评论 • 1028 次浏览 • 2024-01-15 10:36 • 来自相关话题

一、Iceberg概念及特点 Apache Iceberg是一种用于大型数据分析场景的开放表格式（Table Format）。Iceberg使用一种类似于SQL表的高性能表格式，Iceberg格式表单表可以存储数十PB数据，适配Spark、Trin... ...查看全部

技术共享 • 数栈君发表了文章 • 0 个评论 • 358 次浏览 • 2024-06-27 19:20 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 330 次浏览 • 2024-01-17 10:34 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 293 次浏览 • 2024-01-15 10:40 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 466 次浏览 • 2024-01-15 10:39 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 527 次浏览 • 2024-01-15 10:38 • 来自相关话题

知识百科 • 数栈君发表了文章 • 0 个评论 • 1028 次浏览 • 2024-01-15 10:36 • 来自相关话题

更多...