批流一体

批流一体

请教一下 我使用standalone模式启动chunjun这个错

ChunJun139****7450 回复了问题 • 1 人关注 • 2 个回复 • 652 次浏览 • 2024-05-17 11:34 • 来自相关话题

从理论到实践:构建企业级流批一体数据处理架构

知识百科数栈君 发表了文章 • 0 个评论 • 125 次浏览 • 2024-04-28 14:10 • 来自相关话题

流处理与批处理的完美结合:流批一体技术深度解析

知识百科数栈君 发表了文章 • 0 个评论 • 141 次浏览 • 2024-04-28 14:10 • 来自相关话题

揭秘流批一体化平台:如何实现数据处理的灵活性与时效性

知识百科数栈君 发表了文章 • 0 个评论 • 185 次浏览 • 2024-04-28 14:09 • 来自相关话题

流批一体:打造实时与批量数据处理的高效融合策略

知识百科数栈君 发表了文章 • 0 个评论 • 138 次浏览 • 2024-04-28 14:09 • 来自相关话题

深入浅出流批一体理论篇——数据架构的演进

网友分享数栈君 发表了文章 • 0 个评论 • 227 次浏览 • 2024-04-28 14:08 • 来自相关话题

一、前大数据时代人人都知道罗马不是一天建成的,但没人告诉过你罗马是怎样一天天建成的。你看见罗马时,它就已经是罗马了。当我进阿里时,正是这样的感觉。我没有经历过阿里数据架构(包括平台工具)从0到1的过程。我相信很多阿里老员工也没有未见得全经历过。因为从行业视角来... ...查看全部

流处理和批处理讲解、主流框架对比、流批一体架构

网友分享数栈君 发表了文章 • 0 个评论 • 1612 次浏览 • 2024-04-28 14:05 • 来自相关话题

什么是流处理和批处理?流处理:对数据进行实时处理的方式,数据会以流的形式不断地产生和处理。流处理可以快速响应数据的变化,及时地进行数据处理和分析,适用于需要实时处理数据的场景。例如:实时数仓、实时监控、实时推荐等等。优点:实时性:数据在产生的时候就立即被处理,... ...查看全部

如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路

产品交流数栈君 发表了文章 • 0 个评论 • 829 次浏览 • 2023-11-10 11:45 • 来自相关话题

在之前的实时湖仓系列文章中,我们已经介绍了实时湖仓对于当前企业数字化转型的重要性,实时湖仓的功能架构设计,以及实时计算和数据湖结合的应用场景。在本篇文章中,将介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践,及未来规划。数栈为什么选择实时湖仓数栈作为一个数据... ...查看全部

大佬们,早上好,我在1.12.8上做logminner然后发现nameMapping配置了未能生效,输出还是原表信息,大佬们有无遇到这个问题

ChunJun150****6033 回复了问题 • 1 人关注 • 1 个回复 • 423 次浏览 • 2023-10-26 14:36 • 来自相关话题

“数据驱动”时代,企业为什么需要实时湖仓?

产品交流数栈君 发表了文章 • 0 个评论 • 1505 次浏览 • 2023-09-05 17:42 • 来自相关话题

当谈到数据湖的时候,大家都在说,可以把所有数据(结构化/半结构化/非结构化)一股脑都丢进去,进行统一的元数据管理。然后上层计算对接,进行流批计算/OLAP 分析/算法分析。这个没问题,数据湖确实能承接底层的这部分能力,但是同时出现的问题也是不容忽视的。本文将关... ...查看全部

如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路

产品交流数栈君 发表了文章 • 0 个评论 • 829 次浏览 • 2023-11-10 11:45 • 来自相关话题

在之前的实时湖仓系列文章中,我们已经介绍了实时湖仓对于当前企业数字化转型的重要性,实时湖仓的功能架构设计,以及实时计算和数据湖结合的应用场景。在本篇文章中,将介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践,及未来规划。数栈为什么选择实时湖仓数栈作为一个数据... ...查看全部

“数据驱动”时代,企业为什么需要实时湖仓?

产品交流数栈君 发表了文章 • 0 个评论 • 1505 次浏览 • 2023-09-05 17:42 • 来自相关话题

当谈到数据湖的时候,大家都在说,可以把所有数据(结构化/半结构化/非结构化)一股脑都丢进去,进行统一的元数据管理。然后上层计算对接,进行流批计算/OLAP 分析/算法分析。这个没问题,数据湖确实能承接底层的这部分能力,但是同时出现的问题也是不容忽视的。本文将关... ...查看全部

请教一下 我使用standalone模式启动chunjun这个错

回复

ChunJun139****7450 回复了问题 • 1 人关注 • 2 个回复 • 652 次浏览 • 2024-05-17 11:34 • 来自相关话题

大佬这是啥问题,install一直显示这个问题

回复

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 397 次浏览 • 2023-07-20 19:23 • 来自相关话题

请教下这里为什么要加上这个, ,现在这个导致拼接出来的名称校验通不过~~

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 3 个回复 • 364 次浏览 • 2023-07-20 19:20 • 来自相关话题

chunjun支持saphana增量同步吗?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 393 次浏览 • 2023-07-20 19:12 • 来自相关话题

而且失败了checkpoint 重试了,jobid 没变的情况下又来了一个!

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 335 次浏览 • 2023-07-20 19:12 • 来自相关话题

为什么推送到Pushgateway的Jobid 跟实际的 jobid 对不上。。。

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 331 次浏览 • 2023-07-20 19:11 • 来自相关话题

chunjun对cdh6.3.2中的hive orc parquet 表支持貌似不行啊,有小伙伴有经验么?

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 369 次浏览 • 2023-07-20 19:09 • 来自相关话题

kafka数据源是包含子json,这个咋拆分,要入两张hive表?

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 338 次浏览 • 2023-07-13 13:52 • 来自相关话题

从理论到实践:构建企业级流批一体数据处理架构

知识百科数栈君 发表了文章 • 0 个评论 • 125 次浏览 • 2024-04-28 14:10 • 来自相关话题

流处理与批处理的完美结合:流批一体技术深度解析

知识百科数栈君 发表了文章 • 0 个评论 • 141 次浏览 • 2024-04-28 14:10 • 来自相关话题

揭秘流批一体化平台:如何实现数据处理的灵活性与时效性

知识百科数栈君 发表了文章 • 0 个评论 • 185 次浏览 • 2024-04-28 14:09 • 来自相关话题

流批一体:打造实时与批量数据处理的高效融合策略

知识百科数栈君 发表了文章 • 0 个评论 • 138 次浏览 • 2024-04-28 14:09 • 来自相关话题

深入浅出流批一体理论篇——数据架构的演进

网友分享数栈君 发表了文章 • 0 个评论 • 227 次浏览 • 2024-04-28 14:08 • 来自相关话题

一、前大数据时代人人都知道罗马不是一天建成的,但没人告诉过你罗马是怎样一天天建成的。你看见罗马时,它就已经是罗马了。当我进阿里时,正是这样的感觉。我没有经历过阿里数据架构(包括平台工具)从0到1的过程。我相信很多阿里老员工也没有未见得全经历过。因为从行业视角来... ...查看全部

流处理和批处理讲解、主流框架对比、流批一体架构

网友分享数栈君 发表了文章 • 0 个评论 • 1612 次浏览 • 2024-04-28 14:05 • 来自相关话题

什么是流处理和批处理?流处理:对数据进行实时处理的方式,数据会以流的形式不断地产生和处理。流处理可以快速响应数据的变化,及时地进行数据处理和分析,适用于需要实时处理数据的场景。例如:实时数仓、实时监控、实时推荐等等。优点:实时性:数据在产生的时候就立即被处理,... ...查看全部

如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路

产品交流数栈君 发表了文章 • 0 个评论 • 829 次浏览 • 2023-11-10 11:45 • 来自相关话题

在之前的实时湖仓系列文章中,我们已经介绍了实时湖仓对于当前企业数字化转型的重要性,实时湖仓的功能架构设计,以及实时计算和数据湖结合的应用场景。在本篇文章中,将介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践,及未来规划。数栈为什么选择实时湖仓数栈作为一个数据... ...查看全部

“数据驱动”时代,企业为什么需要实时湖仓?

产品交流数栈君 发表了文章 • 0 个评论 • 1505 次浏览 • 2023-09-05 17:42 • 来自相关话题

当谈到数据湖的时候,大家都在说,可以把所有数据(结构化/半结构化/非结构化)一股脑都丢进去,进行统一的元数据管理。然后上层计算对接,进行流批计算/OLAP 分析/算法分析。这个没问题,数据湖确实能承接底层的这部分能力,但是同时出现的问题也是不容忽视的。本文将关... ...查看全部

流批一体 湖仓一体

知识百科沸羊羊 发表了文章 • 0 个评论 • 273 次浏览 • 2023-08-08 09:41 • 来自相关话题

delta lake、hudi、iceberg分别是解决数据湖构建的哪些问题?

网友分享数栈君 发表了文章 • 0 个评论 • 533 次浏览 • 2023-05-25 11:18 • 来自相关话题

“数据湖”、“湖仓一体”及“流批一体”等概念,是近年来大数据领域热度最高的词汇,在各大互联网公司掀起了一波波的热潮,各家公司纷纷推出了自己的技术方案。在2020年末,袋鼠云技术团队做了众多技术方案的调研,包括包括Delta Lake、Hudi、Iceberg,... ...查看全部