实时湖仓流批一体
深入浅出流批一体理论篇——数据架构的演进
网友分享 • 数栈君 发表了文章 • 0 个评论 • 643 次浏览 • 2024-04-28 14:08
一、前大数据时代人人都知道罗马不是一天建成的，但没人告诉过你罗马是怎样一天天建成的。你看见罗马时，它就已经是罗马了。当我进阿里时，正是这样的感觉。我没有经历过阿里数据架构（包括平台工具）从0到1的过程。我相信很多阿里老员工也没有未见得全经历过。因为从行业视角来... ...查看全部
流处理和批处理讲解、主流框架对比、流批一体架构
网友分享 • 数栈君 发表了文章 • 0 个评论 • 4105 次浏览 • 2024-04-28 14:05
什么是流处理和批处理？流处理：对数据进行实时处理的方式，数据会以流的形式不断地产生和处理。流处理可以快速响应数据的变化，及时地进行数据处理和分析，适用于需要实时处理数据的场景。例如：实时数仓、实时监控、实时推荐等等。优点：实时性：数据在产生的时候就立即被处理，... ...查看全部
深入浅出流批一体理论篇——数据架构的演进
网友分享 • 数栈君 发表了文章 • 0 个评论 • 643 次浏览 • 2024-04-28 14:08
一、前大数据时代人人都知道罗马不是一天建成的，但没人告诉过你罗马是怎样一天天建成的。你看见罗马时，它就已经是罗马了。当我进阿里时，正是这样的感觉。我没有经历过阿里数据架构（包括平台工具）从0到1的过程。我相信很多阿里老员工也没有未见得全经历过。因为从行业视角来... ...查看全部
流处理和批处理讲解、主流框架对比、流批一体架构
网友分享 • 数栈君 发表了文章 • 0 个评论 • 4105 次浏览 • 2024-04-28 14:05
什么是流处理和批处理？流处理：对数据进行实时处理的方式，数据会以流的形式不断地产生和处理。流处理可以快速响应数据的变化，及时地进行数据处理和分析，适用于需要实时处理数据的场景。例如：实时数仓、实时监控、实时推荐等等。优点：实时性：数据在产生的时候就立即被处理，... ...查看全部
