开源数据中台

开源数据中台

Flink 流批一体在阿里的落地

网友分享数栈君 发表了文章 • 0 个评论 • 8 次浏览 • 9 小时前 • 来自相关话题

短短 5 年,Apache Flink(下称 Flink)从一个突然出现在大数据舞台的“萌新”系统,迅速成长为人人皆知的流计算引擎。在伴随 Flink 发展掀起的这波实时计算浪潮里,阿里是国内走得最前、做得也最多的一个,“流批一体”是它的新赛道。今年双 11,... ...查看全部

mysql cdc读有人使用吗 类型转换失败的问题,是如何解决的呢

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 43 次浏览 • 2023-02-14 15:01 • 来自相关话题

金融控股集团大数据治理探讨

技术共享数栈君 发表了文章 • 0 个评论 • 34 次浏览 • 2023-02-07 16:58 • 来自相关话题

随着金融控股集团下属子公司数字化、信息化水平的提升,集团内部对各类金融业务系统之间的数据交互、数据集成提出了更高要求。强化金融控股集团数据治理,通过深度的数通与共享提升金融控股集团协同效应,对于打造数字时代金控集团核心竞争力至关重要。本文分析了金控集团数据治理... ...查看全部

大型集团企业数据治理研究

技术共享数栈君 发表了文章 • 0 个评论 • 35 次浏览 • 2023-02-07 16:56 • 来自相关话题

1. 引言2020年党中央、国务院印发《关于构建更加完善的要素市场化配置体制机制的意见》,指出土地、劳动力、资本、技术、数据五个要素领域的改革原则、改革方向和具体举措。数据作为新型生产要素,推进数据要素市场化配置,对推动经济高质量发展具有重要意义。数据也被称为... ...查看全部

聊聊企业数据治理、大数据平台产品

技术共享数栈君 发表了文章 • 0 个评论 • 41 次浏览 • 2023-02-07 16:51 • 来自相关话题

数据治理有两种含义,分别是对数据的治理和利用数据治理。这二者相互联系,但并不冲突。从数据本身治理看,数据是一种新的经济增长驱动因素。随着企业信息系统的发展,数据的管理和管治变得更为复杂,不仅包含了企业内部网,还包含了企业外部环境数据的外部网。大部分企业缺乏专门... ...查看全部

大型集团企业数据治理的现状和解决方案

技术共享数栈君 发表了文章 • 0 个评论 • 42 次浏览 • 2023-02-07 16:32 • 来自相关话题

在大数据时代,数据治理是所有的拥有大量数据的公司的巨大的挑战。没有数据,企业缺乏用于做决策的数据的支持。可是有了越来越多的数据,很多情况下却增加了管理数据的成本,真正地让数据产生价值,却发现如何管理这些散碎在不同地方的数据,将数据有效的组织起来成了一个令人头疼... ...查看全部

主数据已死?聊聊大型集团企业数据治理之主数据这个事

技术共享数栈君 发表了文章 • 0 个评论 • 46 次浏览 • 2023-02-07 16:24 • 来自相关话题

说起主数据可能大家都不太陌生,但有深入研究的可能还是偏少一些。十年前主数据很火,今天的主数据感觉有些冷淡,远不如数据治理、数据中台、数据湖更火,但是主数据是企业信息化和数字化的基础,不是主数据管理没必要了而是要求更高了,今天就聊聊这个话题。主数据(Master... ...查看全部

像人类大脑一样思考 ,“防汛大脑”让防汛更智慧

最佳实践数栈君 发表了文章 • 0 个评论 • 37 次浏览 • 2023-02-06 13:56 • 来自相关话题

我国是世界上水情最为复杂、江河治理难度最大、治水任务最为繁重的国家之一。2020年7月12日零时,在鄱阳湖标志性水文站星子站的水位井内,湖水漫过一道红色标记——“1998年洪水位22.52M”,这标志着时隔22年,我国最大淡水湖水位突破有水文记录以来的历史极值... ...查看全部

请教下,Taier工作流能整个流执行和测试么? 没找到工作流的run按钮啊

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 46 次浏览 • 2023-02-01 14:11 • 来自相关话题

兄弟们 新年好呀 我新建文件夹报错啦 有人能帮忙看下是哪里配置不对吗

回复

Taier匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 33 次浏览 • 2023-02-01 14:09 • 来自相关话题

大数据开源讲解:基于Apache Calcite框架的SQL语法扩展探索

技术共享数栈君 发表了文章 • 0 个评论 • 142 次浏览 • 2023-01-12 16:36 • 来自相关话题

Calcite在大数据系统中有着广泛的运用, 比如Apache Flink, Apache Drill等都大量使用了Calcite,理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一。但是不少人在学习Calcite的过程中... ...查看全部

DAG任务调度系统 Taier 演进之道,探究DataSourceX 模块

Taier数栈君 发表了文章 • 0 个评论 • 84 次浏览 • 2022-12-28 13:41 • 来自相关话题

熟悉Taier的小伙伴们应该都知道,在11月7日发布的Taier1.3新版本中,我们融合了「DataSourceX 模块」。这是十分重要的一个变化,移除Taier外部插件依赖,新增数据源插件相关特性,支持后续Taier对接更多的RDBMS类型的SQL任务。本篇... ...查看全部

mysql cdc读有人使用吗 类型转换失败的问题,是如何解决的呢

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 43 次浏览 • 2023-02-14 15:01 • 来自相关话题

请教下,Taier工作流能整个流执行和测试么? 没找到工作流的run按钮啊

回复

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 46 次浏览 • 2023-02-01 14:11 • 来自相关话题

兄弟们 新年好呀 我新建文件夹报错啦 有人能帮忙看下是哪里配置不对吗

回复

Taier匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 33 次浏览 • 2023-02-01 14:09 • 来自相关话题

请问一下Taier的画布最多能编排多少作业呢?

回复

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 59 次浏览 • 2023-02-01 14:08 • 来自相关话题

taier的dag调度,支持条件分支吗?根据上一任务的不同结果选择不同的下一个任务依赖

回复

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 60 次浏览 • 2023-01-16 17:36 • 来自相关话题

大佬们,问一下,taier目前有监控、告警的功能了吗,找了一圈文档,没有找到

回复

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 75 次浏览 • 2023-01-11 18:21 • 来自相关话题

字符串转jsonarray数组的函数是什么?我在文档上试了半天都没反应

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 85 次浏览 • 2023-01-10 10:07 • 来自相关话题

请教下,在用chunjun进行同步的时候,Oracle 没有开启binlog模式是不是不能实现实时采集?

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 60 次浏览 • 2023-01-07 11:05 • 来自相关话题

chunjun这种类型的怎么在窗口函数里面获取啊

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 65 次浏览 • 2023-01-06 17:54 • 来自相关话题

Taier哪位大佬方便给镜像打个arm64版呢?很需要一个arm版,自己编译有不少问题要解决,求大佬帮衬

回复

Taier群内解答 回复了问题 • 1 人关注 • 1 个回复 • 81 次浏览 • 2023-01-06 17:40 • 来自相关话题

Flink 流批一体在阿里的落地

网友分享数栈君 发表了文章 • 0 个评论 • 8 次浏览 • 9 小时前 • 来自相关话题

短短 5 年,Apache Flink(下称 Flink)从一个突然出现在大数据舞台的“萌新”系统,迅速成长为人人皆知的流计算引擎。在伴随 Flink 发展掀起的这波实时计算浪潮里,阿里是国内走得最前、做得也最多的一个,“流批一体”是它的新赛道。今年双 11,... ...查看全部

金融控股集团大数据治理探讨

技术共享数栈君 发表了文章 • 0 个评论 • 34 次浏览 • 2023-02-07 16:58 • 来自相关话题

随着金融控股集团下属子公司数字化、信息化水平的提升,集团内部对各类金融业务系统之间的数据交互、数据集成提出了更高要求。强化金融控股集团数据治理,通过深度的数通与共享提升金融控股集团协同效应,对于打造数字时代金控集团核心竞争力至关重要。本文分析了金控集团数据治理... ...查看全部

大型集团企业数据治理研究

技术共享数栈君 发表了文章 • 0 个评论 • 35 次浏览 • 2023-02-07 16:56 • 来自相关话题

1. 引言2020年党中央、国务院印发《关于构建更加完善的要素市场化配置体制机制的意见》,指出土地、劳动力、资本、技术、数据五个要素领域的改革原则、改革方向和具体举措。数据作为新型生产要素,推进数据要素市场化配置,对推动经济高质量发展具有重要意义。数据也被称为... ...查看全部

聊聊企业数据治理、大数据平台产品

技术共享数栈君 发表了文章 • 0 个评论 • 41 次浏览 • 2023-02-07 16:51 • 来自相关话题

数据治理有两种含义,分别是对数据的治理和利用数据治理。这二者相互联系,但并不冲突。从数据本身治理看,数据是一种新的经济增长驱动因素。随着企业信息系统的发展,数据的管理和管治变得更为复杂,不仅包含了企业内部网,还包含了企业外部环境数据的外部网。大部分企业缺乏专门... ...查看全部

大型集团企业数据治理的现状和解决方案

技术共享数栈君 发表了文章 • 0 个评论 • 42 次浏览 • 2023-02-07 16:32 • 来自相关话题

在大数据时代,数据治理是所有的拥有大量数据的公司的巨大的挑战。没有数据,企业缺乏用于做决策的数据的支持。可是有了越来越多的数据,很多情况下却增加了管理数据的成本,真正地让数据产生价值,却发现如何管理这些散碎在不同地方的数据,将数据有效的组织起来成了一个令人头疼... ...查看全部

主数据已死?聊聊大型集团企业数据治理之主数据这个事

技术共享数栈君 发表了文章 • 0 个评论 • 46 次浏览 • 2023-02-07 16:24 • 来自相关话题

说起主数据可能大家都不太陌生,但有深入研究的可能还是偏少一些。十年前主数据很火,今天的主数据感觉有些冷淡,远不如数据治理、数据中台、数据湖更火,但是主数据是企业信息化和数字化的基础,不是主数据管理没必要了而是要求更高了,今天就聊聊这个话题。主数据(Master... ...查看全部

像人类大脑一样思考 ,“防汛大脑”让防汛更智慧

最佳实践数栈君 发表了文章 • 0 个评论 • 37 次浏览 • 2023-02-06 13:56 • 来自相关话题

我国是世界上水情最为复杂、江河治理难度最大、治水任务最为繁重的国家之一。2020年7月12日零时,在鄱阳湖标志性水文站星子站的水位井内,湖水漫过一道红色标记——“1998年洪水位22.52M”,这标志着时隔22年,我国最大淡水湖水位突破有水文记录以来的历史极值... ...查看全部

基于数据中台的大数据治理,聊聊数据集成

技术共享数栈君 发表了文章 • 0 个评论 • 67 次浏览 • 2023-01-12 16:52 • 来自相关话题

数据中台之数据集成1在现代企业中,由于使用场景、业务形态、技术选型、开发架构的差异,往往有多个异构的、基于不同的软硬件平台上的信息系统同时运行,这些系统的数据源彼此独立、相互封闭,使得数据难以在系统之间交流、共享和融合,从而形成了「信息孤岛」。随着信息化应用的... ...查看全部

基于数据中台的大数据治理,聊聊数据源

技术共享数栈君 发表了文章 • 0 个评论 • 64 次浏览 • 2023-01-12 16:51 • 来自相关话题

1数据产生当今企业在发展和经营的过程中,「信息化」早已是建设标准,在企业运作的过程中,或多或少地,积累了很多数据。在进入到DT时代,数据成为企业未来成长的引擎也越来越被认可。有先见之明的企业更注重于从方方面面来收集各项数据。我们今天的话题就以数据产生和数据内容... ...查看全部

大数据开源讲解:基于Apache Calcite框架的SQL语法扩展探索

技术共享数栈君 发表了文章 • 0 个评论 • 142 次浏览 • 2023-01-12 16:36 • 来自相关话题

Calcite在大数据系统中有着广泛的运用, 比如Apache Flink, Apache Drill等都大量使用了Calcite,理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一。但是不少人在学习Calcite的过程中... ...查看全部