大数据开源

大数据开源

数据资产管理实施路径(1)

技术共享数栈君 发表了文章 • 0 个评论 • 44 次浏览 • 4 天前 • 来自相关话题

1.数据资产盘点从业务视角与技术视角出发,形成企业数据资产框架和数据资产目录,支持建立全面覆盖的企业级数据资产地图,为数据资产“用什么”以及“如何用”奠定基础。数据资产盘点路径 数据资产盘点包含调研诊断、数据盘点、数据对标校正、分类分级、权责划分、数据资产目录... ...查看全部

数据资产管理框架概述

技术共享数栈君 发表了文章 • 0 个评论 • 32 次浏览 • 4 天前 • 来自相关话题

完备的企业数据资产管理体系,首先依赖于数据资产管理规划及机制等上层设计,其次基于数据资产管理职能,使用有效的数据资产管理工具,将数据转化为数据资产,从而把数据价值真正发挥出来。数据资产管理架构如下图所示:  袋鼠云数据资产管理架构图具体而言,数据资产管理包括数... ...查看全部

数据资产管理含义

技术共享数栈君 发表了文章 • 0 个评论 • 32 次浏览 • 4 天前 • 来自相关话题

中国信通院《数据资产管理实践白皮书6.0》:数据资产管理是指对数据资产进行规划、控制和供给的一组活动职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,从而控制、保护、交付和提高数据资产的价值。数据资产管理须充分融合政策、管理、业务、... ...查看全部

数据资产定义

技术共享数栈君 发表了文章 • 0 个评论 • 35 次浏览 • 4 天前 • 来自相关话题

关于数据资产的定义,中国信通院、国标等都有相关观点,但这些定义并不是相互冲突的,而是相互补充的,是基于不同视角下对数据资产的理解。中国信通院《数据资产管理实践白皮书6.0》:数据资产是由组织(政府机构、企事业单位等)合法拥有或控制的数据资源,以电子或其他方式记... ...查看全部

数据资产管理助力数据资产入表

技术共享数栈君 发表了文章 • 0 个评论 • 33 次浏览 • 5 天前 • 来自相关话题

数据资产不同于原始数据,它代表着经济社会数字化转型中的一种新型资产类别,被认为是数字时代中极为关键的资产形式。通过有序推进数据资产化并强化其全生命周期的管理,可以更有效地激发数据资产的内在价值。在现代产业生态链中,数据资产管理充当着桥梁与纽带的关键角色。它衔接... ...查看全部

数据要素:第五大生产要素

技术共享数栈君 发表了文章 • 0 个评论 • 43 次浏览 • 5 天前 • 来自相关话题

数据要素:第五大生产要素生产要素是维系国民经济运行及市场主体生产经营过程中所必须具备的基本因素,是生产过程中必须加以利用的资源。信息技术革命之后,随着信息技术、大数据、人工智能的飞速发展,数据要素的重要性日益凸显,它不仅渗透到国民经济运行的各个层面,而且在市场... ...查看全部

数据资产入表:如何处理脏数据

知识百科沸羊羊 发表了文章 • 0 个评论 • 16 次浏览 • 2024-08-27 14:52 • 来自相关话题

数据转换中的数据生命周期管理

知识百科沸羊羊 发表了文章 • 0 个评论 • 22 次浏览 • 2024-08-27 14:52 • 来自相关话题

数据资产入表:数据版本控制的重要性

知识百科沸羊羊 发表了文章 • 0 个评论 • 15 次浏览 • 2024-08-27 14:52 • 来自相关话题

数据转换中的数据规范化处理

知识百科沸羊羊 发表了文章 • 0 个评论 • 17 次浏览 • 2024-08-27 14:52 • 来自相关话题

条新动态, 点击查看
这部分官网上是有的,你再仔细找找想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新... 显示全部 »
这部分官网上是有的,你再仔细找找想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack/chunjun  

ChunJun FTP Connector 功能扩展解读

ChunJun数栈君 发表了文章 • 0 个评论 • 392 次浏览 • 2023-05-31 17:35 • 来自相关话题

本文将从 FTP Connector 的功能详解,自定义文件切割及自定义 FileFormat 三个方面为大家带来 ChunJun FTP Connector 的功能扩展分享。FTP Connector 详解FTP 是用于在网络上进行文件传输的一套标准协议,它... ...查看全部

技术干货|如何利用 ChunJun 实现数据离线同步?

ChunJun数栈君 发表了文章 • 0 个评论 • 450 次浏览 • 2023-05-19 10:08 • 来自相关话题

ChunJun 是⼀款稳定、易⽤、⾼效、批流⼀体的数据集成框架,基于计算引擎 Flink 实现多种异构数据源之间的数据同步与计算。ChunJun 可以把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中,从⽽为企业提供全⾯的数据共享,目前已在上千家公司部... ...查看全部

新起点!大数据分布式可视化的 DAG 任务调度系统 Taier 正式发布1.4版本

Taier数栈君 发表了文章 • 0 个评论 • 543 次浏览 • 2023-04-18 18:50 • 来自相关话题

我们很高兴向大家宣布,2023年4月14日,Taier(github.com/DTStack/Taier)正式发布 1.4 版本。自2022年2月份 Taier 正式开源以来,收到了很多开发者和行业用户的积极评价,在诸多生产环境中已得到充分应用。Taier 1... ...查看全部

袋鼠云数栈离线开发平台在小文件治理上的探索实践之路

产品交流数栈君 发表了文章 • 0 个评论 • 600 次浏览 • 2023-03-29 11:23 • 来自相关话题

日常生产中 HDFS 上小文件产生是一个很正常的事情,同时小文件也是 Hadoop 集群运维中的常见挑战,尤其对于大规模运行的集群来说可谓至关重要。数据地图是离线开发产品的基本使用单位,包含全部表和项目的相关信息,可以对表做相关的权限管理和脱敏管理操作,以及可... ...查看全部

ChunJun 顺利晋级“2022 年中国开源创新大赛”决赛,并荣获“优秀开源项目/社区”奖项

ChunJun数栈君 发表了文章 • 0 个评论 • 438 次浏览 • 2023-03-14 11:13 • 来自相关话题

日前,“2022年中国开源创新大赛”初赛晋级名单公布,易用、稳定、高效的批流统一的数据集成框架 ChunJun 顺利晋级决赛,并荣获“2022年中国开源创新大赛优秀开源项目/社区”奖项。感谢组委会专家的认可,ChunJun也将继续秉承技术初心,砥砺前行,不遗余... ...查看全部

一看就懂!任务提交的资源判断在Taier中的实践

Taier小美 发表了文章 • 0 个评论 • 512 次浏览 • 2023-02-01 10:17 • 来自相关话题

Taier 介绍Taier 是袋鼠云开源项目之一,是一个分布式可视化的DAG任务调度系统。旨在降低ETL开发成本、提高大数据平台稳定性,大数据开发人员可以在 Taier 直接进行业务逻辑的开发,而不用关心任务错综复杂的依赖关系与底层的大数据平台的架构实现,将工... ...查看全部

袋鼠云基于Calcite框架的SQL语法扩展探索

技术共享数栈君 发表了文章 • 0 个评论 • 576 次浏览 • 2023-01-16 16:47 • 来自相关话题

Calcite在大数据系统中有着广泛的运用, 比如Apache Flink, Apache Drill等都大量使用了Calcite,理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一。但是不少人在学习Calcite的过程中... ...查看全部

基于数据中台的大数据治理,数字化运营组织

技术共享数栈君 发表了文章 • 0 个评论 • 800 次浏览 • 2023-01-13 10:09 • 来自相关话题

1在互联网企业,业务和数据团队是无缝衔接的。本身互联网企业的业务运营对技术和数据就是极度的依赖,所以业务的同学对技术和数据具有天生的敏感性。基于这个前提,业务团队对数据团也是非常直接的喊着“要、要、要”。在这样的场景下,说明业务团队能够明确地提出数据需求,且数... ...查看全部

大数据开源讲解:基于Apache Calcite框架的SQL语法扩展探索

技术共享数栈君 发表了文章 • 0 个评论 • 1237 次浏览 • 2023-01-12 16:36 • 来自相关话题

Calcite在大数据系统中有着广泛的运用, 比如Apache Flink, Apache Drill等都大量使用了Calcite,理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一。但是不少人在学习Calcite的过程中... ...查看全部

DAG任务调度系统 Taier 演进之道,探究DataSourceX 模块

Taier数栈君 发表了文章 • 0 个评论 • 887 次浏览 • 2022-12-28 13:41 • 来自相关话题

熟悉Taier的小伙伴们应该都知道,在11月7日发布的Taier1.3新版本中,我们融合了「DataSourceX 模块」。这是十分重要的一个变化,移除Taier外部插件依赖,新增数据源插件相关特性,支持后续Taier对接更多的RDBMS类型的SQL任务。本篇... ...查看全部

你好想问下提交flinksql任务的时候 Configuration 下面的 Interval Periodic checkpoints disabled

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 392 次浏览 • 2023-06-21 17:03 • 来自相关话题

chunjun支持实时mysql迁移到clickhouse吗?有没有已经在正常运行的json做参考

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 360 次浏览 • 2023-06-21 17:02 • 来自相关话题

大神们,请问1.16什么时候release有计划吗?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 358 次浏览 • 2023-06-21 17:01 • 来自相关话题

mysql迁移到clickhouse,大字段 容易出现clickhouse response超时 是什么原因呢

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 367 次浏览 • 2023-06-21 17:00 • 来自相关话题

老师们早上好,binlog同步MySQL,出现这个错误是bug么?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 368 次浏览 • 2023-06-21 16:59 • 来自相关话题

老师,请问rabbitMQ支持sslConfig吗(开启ssl连接认证),看着elasticSearch是支持的

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 366 次浏览 • 2023-06-21 16:59 • 来自相关话题

各位大佬,native-k8s模式如何使用,有没有一个quickstart

回复

ChunJun匿名用户 发起了问题 • 2 人关注 • 0 个回复 • 351 次浏览 • 2023-06-21 16:58 • 来自相关话题

数据还原,支持DDL的变更, 有这样的mysql 到mysql的模版吗?chunjun v1.12.8的。

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 350 次浏览 • 2023-06-21 16:55 • 来自相关话题

老师您好,想要实现mongo到mongo的数据传输,

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 382 次浏览 • 2023-06-21 16:54 • 来自相关话题

chunjun支持实时采集Oracle 吗

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 424 次浏览 • 2023-06-21 16:53 • 来自相关话题

数据资产管理实施路径(1)

技术共享数栈君 发表了文章 • 0 个评论 • 44 次浏览 • 4 天前 • 来自相关话题

1.数据资产盘点从业务视角与技术视角出发,形成企业数据资产框架和数据资产目录,支持建立全面覆盖的企业级数据资产地图,为数据资产“用什么”以及“如何用”奠定基础。数据资产盘点路径 数据资产盘点包含调研诊断、数据盘点、数据对标校正、分类分级、权责划分、数据资产目录... ...查看全部

数据资产管理框架概述

技术共享数栈君 发表了文章 • 0 个评论 • 32 次浏览 • 4 天前 • 来自相关话题

完备的企业数据资产管理体系,首先依赖于数据资产管理规划及机制等上层设计,其次基于数据资产管理职能,使用有效的数据资产管理工具,将数据转化为数据资产,从而把数据价值真正发挥出来。数据资产管理架构如下图所示:  袋鼠云数据资产管理架构图具体而言,数据资产管理包括数... ...查看全部

数据资产管理含义

技术共享数栈君 发表了文章 • 0 个评论 • 32 次浏览 • 4 天前 • 来自相关话题

中国信通院《数据资产管理实践白皮书6.0》:数据资产管理是指对数据资产进行规划、控制和供给的一组活动职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,从而控制、保护、交付和提高数据资产的价值。数据资产管理须充分融合政策、管理、业务、... ...查看全部

数据资产定义

技术共享数栈君 发表了文章 • 0 个评论 • 35 次浏览 • 4 天前 • 来自相关话题

关于数据资产的定义,中国信通院、国标等都有相关观点,但这些定义并不是相互冲突的,而是相互补充的,是基于不同视角下对数据资产的理解。中国信通院《数据资产管理实践白皮书6.0》:数据资产是由组织(政府机构、企事业单位等)合法拥有或控制的数据资源,以电子或其他方式记... ...查看全部

数据资产管理助力数据资产入表

技术共享数栈君 发表了文章 • 0 个评论 • 33 次浏览 • 5 天前 • 来自相关话题

数据资产不同于原始数据,它代表着经济社会数字化转型中的一种新型资产类别,被认为是数字时代中极为关键的资产形式。通过有序推进数据资产化并强化其全生命周期的管理,可以更有效地激发数据资产的内在价值。在现代产业生态链中,数据资产管理充当着桥梁与纽带的关键角色。它衔接... ...查看全部

数据要素:第五大生产要素

技术共享数栈君 发表了文章 • 0 个评论 • 43 次浏览 • 5 天前 • 来自相关话题

数据要素:第五大生产要素生产要素是维系国民经济运行及市场主体生产经营过程中所必须具备的基本因素,是生产过程中必须加以利用的资源。信息技术革命之后,随着信息技术、大数据、人工智能的飞速发展,数据要素的重要性日益凸显,它不仅渗透到国民经济运行的各个层面,而且在市场... ...查看全部

数据资产入表:如何处理脏数据

知识百科沸羊羊 发表了文章 • 0 个评论 • 16 次浏览 • 2024-08-27 14:52 • 来自相关话题

数据转换中的数据生命周期管理

知识百科沸羊羊 发表了文章 • 0 个评论 • 22 次浏览 • 2024-08-27 14:52 • 来自相关话题

数据资产入表:数据版本控制的重要性

知识百科沸羊羊 发表了文章 • 0 个评论 • 15 次浏览 • 2024-08-27 14:52 • 来自相关话题

数据转换中的数据规范化处理

知识百科沸羊羊 发表了文章 • 0 个评论 • 17 次浏览 • 2024-08-27 14:52 • 来自相关话题