数据开发平台

数据开发平台

MySQL与Hadoop数据同步方案:Sqoop与Flume的应用探究

知识百科数栈君 发表了文章 • 0 个评论 • 43 次浏览 • 2023-07-04 16:33 • 来自相关话题

Apache NiFi:实时数据流处理的可视化利器

网友分享数栈君 发表了文章 • 0 个评论 • 150 次浏览 • 2023-07-04 16:31 • 来自相关话题

Apache NiFi是一个强大的、可扩展的开源数据流处理工具,广泛应用于大数据领域。本文将介绍Apache NiFi的核心概念和架构,并提供代码实例展示其在实时数据流处理中的应用。Apache NiFi随着大数据时代的到来,组织需要处理大量的数据流,以便及时... ...查看全部

TensorFlow巨浪中的巨人:大数据领域的引领者 TensorFlow实战

网友分享数栈君 发表了文章 • 0 个评论 • 96 次浏览 • 2023-07-04 16:17 • 来自相关话题

大数据时代的到来带来了海量数据的处理和分析需求。在这个背景下,TensorFlow作为一种强大的深度学习框架,展现了其在大数据领域中的巨大潜力。本文将深入探索TensorFlow在大数据处理和分析中的应用,介绍其在数据预处理、模型构建、分布式训练和性能优化等方... ...查看全部

PySpark实战指南:大数据处理与分析的终极指南

知识百科数栈君 发表了文章 • 0 个评论 • 71 次浏览 • 2023-07-03 13:58 • 来自相关话题

大数据分析与机器学习:技术深度与实例解析

网友分享数栈君 发表了文章 • 0 个评论 • 98 次浏览 • 2023-07-03 13:56 • 来自相关话题

大数据分析与机器学习已成为当今商业决策和科学研究中的关键组成部分。本文将深入探讨大数据技术的背景和原则,并结合实例介绍一些常见的大数据分析和机器学习技术。随着互联网和计算能力的飞速发展,大数据成为了各行业面临的重要挑战和机遇。通过大数据分析,我们可以挖掘出隐藏... ...查看全部

大数据处理领域的经典框架:MapReduce详解与应用

网友分享数栈君 发表了文章 • 0 个评论 • 68 次浏览 • 2023-07-03 13:50 • 来自相关话题

MapReduce是一个经典的大数据处理框架,可以帮助我们高效地处理庞大的数据集。本文将介绍MapReduce的基本原理和实现方法,并给出一个简单的示例。一、MapReduce基本原理MapReduce的基本原理包括两个阶段:Map和Reduce。1、Map阶... ...查看全部

个人数据空间及其结构解析

网友分享数栈君 发表了文章 • 0 个评论 • 112 次浏览 • 2023-06-26 16:04 • 来自相关话题

“个人数据空间”(peronsal dataspace)是GDPR之后逐渐发展起来的概念。主要目的是确定个人数据的范围和边界。由于尚未形成关于个人数据保护的国际公约,因此,各个国家的对个人数据空间的范围和边界的界定存在一定的差异。在中国,按照《个人信息保护法》... ...查看全部

演化中的个人数据开发利用新范式

网友分享数栈君 发表了文章 • 0 个评论 • 84 次浏览 • 2023-06-26 16:03 • 来自相关话题

在所有数据资产类型中,个人数据的开发利用潜在价值巨大。个人数据在过去几十年里,已经得到前所未有的开发和利用,推动了经济增长和社会发展。但与此同时,也逐渐引发越来越凸出的经济、社会和伦理道德问题。App应用服务包罗万象,几乎涵盖了个人生活、工作和学习等方方面面。... ...查看全部

从开发和业务两个方面总结10条数据开发实用技能

网友分享数栈君 发表了文章 • 0 个评论 • 81 次浏览 • 2023-06-26 16:00 • 来自相关话题

开发类Article 6关联数据之前,先检查维度表,各维度的值是否有异常,比如null,空值,异常值等等。Article 5进行聚合操作后,检查聚合后的数据值是否合理,比如sum求和后的值,找一些已有的数据做核对。Article 4left join之后的数据... ...查看全部

关于未来数据开发技术的发展方向

网友分享数栈君 发表了文章 • 0 个评论 • 85 次浏览 • 2023-06-26 15:59 • 来自相关话题

数据开发技术的3个方向未来数据开发技术方向,我认为有三个,首先是流批一体成为主流开发模式,其次是代码自动化技术走向成熟,第三是 OLAP Cubes 终将衰落。一、流批一体成为主流开发模式先说说我看到的数据开发的历史。“远古”时代,通过写 SQL 脚本抽取 O... ...查看全部

袋鼠云产品功能更新报告03期丨产品体验全面优化,请查收!

产品交流小美 发表了文章 • 0 个评论 • 220 次浏览 • 2023-01-03 17:38 • 来自相关话题

年底啦~2022 年即将走到尾声,不过袋鼠云对产品品质的坚持始终如一,这段时间我们对产品本身以及客户反馈的一些问题进行了持续的更新和优化,例如新增任务告警,进行了 Connector 相关功能优化,以及支持跨时间分区圈群等。以下为袋鼠云产品功能更新报告第三期内... ...查看全部

数据中台实战:袋鼠云基于Iceberg构建的湖仓一体数据架构探索及实践,快速落地大数据转移、大数据平台开发

技术共享数栈君 发表了文章 • 0 个评论 • 701 次浏览 • 2022-12-21 11:28 • 来自相关话题

“数据湖”、“湖仓一体”及“流批一体”等概念,是近年来大数据领域热度最高的词汇,在各大互联网公司掀起了一波波的热潮,各家公司纷纷推出了自己的技术方案,其中作为全链路数字化技术与服务提供商的袋鼠云,在探索数据湖架构的早期,就调研并选用了Iceberg作为基础框架... ...查看全部

袋鼠云数栈技术团队获开源中国“2022年度优秀开源技术团队”

开源动态小美 发表了文章 • 0 个评论 • 226 次浏览 • 2022-12-15 15:17 • 来自相关话题

近日,在“开源中国(OSCHINA)”开展的年度评选中,袋鼠云数栈技术团队凭借在2022年间的技术分享频率及质量、运营积极性等多方面的表现,荣获“2022年度优秀开源技术团队”的称号,这也是袋鼠云数栈技术团队连续第二年获得此奖项。开源中国作为国内最大的开源技术... ...查看全部

从数据治理到数据应用,制造业企业如何突破数字化转型困境丨行业方案

最佳实践小美 发表了文章 • 0 个评论 • 225 次浏览 • 2022-12-15 15:14 • 来自相关话题

我国制造业拥有31个大类、179个中类和609个小类,是全球产业门类最齐全、产业体系最完整的制造业。作为世界工厂,中国制造业在拉动本国经济增长、促进本国就业等方面贡献卓越,更是我国民生消费的底层基础。同时,中国从原来的原料出口国,逐步转为工业品中间品、中间品等... ...查看全部

行业方案 | 新规落地,企业集团财务公司如何构建数智财务体系?

最佳实践小美 发表了文章 • 0 个评论 • 232 次浏览 • 2022-12-14 17:46 • 来自相关话题

企业集团财务公司(以下简称财务公司)是指以加强企业集团资金集中管理和提高企业集团资金使用效率为目的,依托企业集团、服务企业集团,为企业集团成员单位提供金融服务的非银行金融机构。通俗来讲财务公司是大型企业集团内部的银行,是需要向央行缴纳存款准备金的一种金融机构。... ...查看全部

数据管理平台和数据开发平台的区别是什么?

回复

数据中台匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 173 次浏览 • 2022-12-19 15:17 • 来自相关话题

请问有福茶网的数字化转型案例吗?

回复

产品交流小美 回复了问题 • 1 人关注 • 1 个回复 • 275 次浏览 • 2022-12-14 17:55 • 来自相关话题

福茶网科技发展有限公司有做过数据中台吗?有相关的案例吗?

回复

数据中台群内解答 回复了问题 • 1 人关注 • 1 个回复 • 235 次浏览 • 2022-12-14 12:00 • 来自相关话题

MySQL与Hadoop数据同步方案:Sqoop与Flume的应用探究

知识百科数栈君 发表了文章 • 0 个评论 • 43 次浏览 • 2023-07-04 16:33 • 来自相关话题

Apache NiFi:实时数据流处理的可视化利器

网友分享数栈君 发表了文章 • 0 个评论 • 150 次浏览 • 2023-07-04 16:31 • 来自相关话题

Apache NiFi是一个强大的、可扩展的开源数据流处理工具,广泛应用于大数据领域。本文将介绍Apache NiFi的核心概念和架构,并提供代码实例展示其在实时数据流处理中的应用。Apache NiFi随着大数据时代的到来,组织需要处理大量的数据流,以便及时... ...查看全部

TensorFlow巨浪中的巨人:大数据领域的引领者 TensorFlow实战

网友分享数栈君 发表了文章 • 0 个评论 • 96 次浏览 • 2023-07-04 16:17 • 来自相关话题

大数据时代的到来带来了海量数据的处理和分析需求。在这个背景下,TensorFlow作为一种强大的深度学习框架,展现了其在大数据领域中的巨大潜力。本文将深入探索TensorFlow在大数据处理和分析中的应用,介绍其在数据预处理、模型构建、分布式训练和性能优化等方... ...查看全部

PySpark实战指南:大数据处理与分析的终极指南

知识百科数栈君 发表了文章 • 0 个评论 • 71 次浏览 • 2023-07-03 13:58 • 来自相关话题

大数据分析与机器学习:技术深度与实例解析

网友分享数栈君 发表了文章 • 0 个评论 • 98 次浏览 • 2023-07-03 13:56 • 来自相关话题

大数据分析与机器学习已成为当今商业决策和科学研究中的关键组成部分。本文将深入探讨大数据技术的背景和原则,并结合实例介绍一些常见的大数据分析和机器学习技术。随着互联网和计算能力的飞速发展,大数据成为了各行业面临的重要挑战和机遇。通过大数据分析,我们可以挖掘出隐藏... ...查看全部

大数据处理领域的经典框架:MapReduce详解与应用

网友分享数栈君 发表了文章 • 0 个评论 • 68 次浏览 • 2023-07-03 13:50 • 来自相关话题

MapReduce是一个经典的大数据处理框架,可以帮助我们高效地处理庞大的数据集。本文将介绍MapReduce的基本原理和实现方法,并给出一个简单的示例。一、MapReduce基本原理MapReduce的基本原理包括两个阶段:Map和Reduce。1、Map阶... ...查看全部

个人数据空间及其结构解析

网友分享数栈君 发表了文章 • 0 个评论 • 112 次浏览 • 2023-06-26 16:04 • 来自相关话题

“个人数据空间”(peronsal dataspace)是GDPR之后逐渐发展起来的概念。主要目的是确定个人数据的范围和边界。由于尚未形成关于个人数据保护的国际公约,因此,各个国家的对个人数据空间的范围和边界的界定存在一定的差异。在中国,按照《个人信息保护法》... ...查看全部

演化中的个人数据开发利用新范式

网友分享数栈君 发表了文章 • 0 个评论 • 84 次浏览 • 2023-06-26 16:03 • 来自相关话题

在所有数据资产类型中,个人数据的开发利用潜在价值巨大。个人数据在过去几十年里,已经得到前所未有的开发和利用,推动了经济增长和社会发展。但与此同时,也逐渐引发越来越凸出的经济、社会和伦理道德问题。App应用服务包罗万象,几乎涵盖了个人生活、工作和学习等方方面面。... ...查看全部

从开发和业务两个方面总结10条数据开发实用技能

网友分享数栈君 发表了文章 • 0 个评论 • 81 次浏览 • 2023-06-26 16:00 • 来自相关话题

开发类Article 6关联数据之前,先检查维度表,各维度的值是否有异常,比如null,空值,异常值等等。Article 5进行聚合操作后,检查聚合后的数据值是否合理,比如sum求和后的值,找一些已有的数据做核对。Article 4left join之后的数据... ...查看全部

关于未来数据开发技术的发展方向

网友分享数栈君 发表了文章 • 0 个评论 • 85 次浏览 • 2023-06-26 15:59 • 来自相关话题

数据开发技术的3个方向未来数据开发技术方向,我认为有三个,首先是流批一体成为主流开发模式,其次是代码自动化技术走向成熟,第三是 OLAP Cubes 终将衰落。一、流批一体成为主流开发模式先说说我看到的数据开发的历史。“远古”时代,通过写 SQL 脚本抽取 O... ...查看全部