数据中台

数据中台

浅谈数据开发神器——数栈离线开发平台(BatchWorks)

知识百科数栈君 发表了文章 • 0 个评论 • 20 次浏览 • 2023-11-17 11:50 • 来自相关话题

从实战中了解数据开发全流程——DataWorks OpenAPI实战

知识百科数栈君 发表了文章 • 0 个评论 • 17 次浏览 • 2023-11-17 11:50 • 来自相关话题

数据全栈知识架构,数据(平台、开发、管理、分析)

知识百科数栈君 发表了文章 • 0 个评论 • 19 次浏览 • 2023-11-17 11:49 • 来自相关话题

大数据在开发的过程中,主要会遇到哪些难点?

知识百科数栈君 发表了文章 • 0 个评论 • 21 次浏览 • 2023-11-17 11:49 • 来自相关话题

大数据架构、大数据开发与数据分析的区别

知识百科数栈君 发表了文章 • 0 个评论 • 20 次浏览 • 2023-11-17 11:49 • 来自相关话题

大数据的数据服务开发技术与数据中台

知识百科数栈君 发表了文章 • 0 个评论 • 19 次浏览 • 2023-11-17 11:48 • 来自相关话题

大数据开发跟大数据分析的区别是什么?

知识百科数栈君 发表了文章 • 0 个评论 • 19 次浏览 • 2023-11-17 11:48 • 来自相关话题

数据技术篇之离线数据开发

知识百科数栈君 发表了文章 • 0 个评论 • 20 次浏览 • 2023-11-17 11:47 • 来自相关话题

浅谈数据中台之数据开发

知识百科数栈君 发表了文章 • 0 个评论 • 22 次浏览 • 2023-11-17 11:47 • 来自相关话题

数据开发必要知识及框架流程图

知识百科数栈君 发表了文章 • 0 个评论 • 26 次浏览 • 2023-11-17 11:47 • 来自相关话题

在当今的数字化时代,数据已经成为企业的重要资产。然而,如何有效地利用这些数据,提取出有价值的信息,是每个企业都需要面对的问题。这就需要数据开发。数据开发是一种将原始数据转化为可用信息的过程,包括数据采集、清洗、转换、加载和分析等步骤。本文将介绍数据开发的必要知... ...查看全部

如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路

产品交流数栈君 发表了文章 • 0 个评论 • 54 次浏览 • 2023-11-10 11:45 • 来自相关话题

在之前的实时湖仓系列文章中,我们已经介绍了实时湖仓对于当前企业数字化转型的重要性,实时湖仓的功能架构设计,以及实时计算和数据湖结合的应用场景。在本篇文章中,将介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践,及未来规划。数栈为什么选择实时湖仓数栈作为一个数据... ...查看全部

捷报 | 台州银行与袋鼠云达成合作

公司动态数栈君 发表了文章 • 0 个评论 • 131 次浏览 • 2023-10-19 13:47 • 来自相关话题

近日,台州银行与袋鼠云达成合作,携手打造数据采集平台,将客户数据进行统一汇聚、计算,建立统一的数据标准,解决数据开发不规范等问题,从而形成数据资产,保障数据分析的效率和准确性。据了解,近年来,台州银行在传统小微金融经验中融入新的科技技术,努力构建小微金融服务智... ...查看全部

袋鼠云数栈 DataOps 数据生产力实践,实现数据流程的自动化和规范化

产品交流数栈君 发表了文章 • 0 个评论 • 217 次浏览 • 2023-08-11 20:05 • 来自相关话题

袋鼠云产品团队在帮助企业进行数字化转型实践的过程中,发现很多企业在数据生产链路上都有着相同的问题。包括数据团队聚焦于业务需求短期内的快速交付,内部缺少自顶向下的数据生产管理制度,在数据标准、数据生产流程到研发规范的各个层面均存在不完善与不规范之处;很多环节依赖... ...查看全部

揭秘|来看看袋鼠云数栈内部的数据资产血缘方案设计与实现

产品交流数栈君 发表了文章 • 0 个评论 • 259 次浏览 • 2023-07-19 16:51 • 来自相关话题

数据资产现在需要接入数栈内部相关应用的时候,支持查看血缘的类型从表、离线任务增加到需要表、离线任务、实时任务、API任务、指标、标签等,需要支持数栈现有的所有应用任务,最终实现在数据资产平台查看任务的完整应用链路。虽然增加不同的任务,现阶段资产实现的血缘大体上... ...查看全部

袋鼠云产品功能更新报告06期(指标管理篇)|数栈产品功能升级,做产品我们是认真的!

产品交流数栈君 发表了文章 • 0 个评论 • 309 次浏览 • 2023-07-13 10:35 • 来自相关话题

指标管理平台新增功能更新1.指标 API 生成的 Hive 大宽表支持生命周期设置  新增功能说明  背景:指标 API 生成过程中会在 Hive 中存储一份数据,需要同步支持生命周期设置。新增功能说明:指标 API 设置中,区分 Hive、HBase 数据源... ...查看全部

袋鼠云产品功能更新报告06期(数据服务篇)|数栈产品功能升级,做产品我们是认真的!

产品交流数栈君 发表了文章 • 0 个评论 • 217 次浏览 • 2023-07-13 10:32 • 来自相关话题

数据服务平台新增功能更新1.SQL 生成 API 操作符支持修改  新增功能说明  背景:生成 API SQL 中参数的操作符由平台自动解析,不支持修改,存在解析错误的情况。新增功能说明:操作符仍由平台自动解析,如解析有问题可手动修改(注意此处仅做显示的修改,... ...查看全部

袋鼠云产品功能更新报告06期(数据资产篇)|数栈产品功能升级,做产品我们是认真的!

产品交流数栈君 发表了文章 • 0 个评论 • 227 次浏览 • 2023-07-13 10:30 • 来自相关话题

数据资产平台新增功能更新1.监控数据变更  新增功能说明  背景:客户希望某些场景发生数据变更的时候,支持对比前后不同时间的数据,比如需要对比昨天和今天不同分区的数据,此场景可以通过对接控制台自定义参数来满足。新增功能说明:数据质量支持对接控制台自定义参数,涉... ...查看全部

袋鼠云产品功能更新报告06期(实时开发篇)|数栈产品功能升级,做产品我们是认真的!

产品交流数栈君 发表了文章 • 0 个评论 • 195 次浏览 • 2023-07-13 10:28 • 来自相关话题

实时开发平台新增功能更新1.新增【运维总览】模块  新增功能说明  背景:之前实时平台的运维都是针对单任务的,缺乏全局性的运维统计和分析能力,并且缺乏对运行中任务的监控分析。因为实时任务一旦运行失败,就会立即对线上数据服务产生影响,我们希望能在任务失败之前,就... ...查看全部

袋鼠云产品功能更新报告06期(离线开发篇下)|数栈产品功能升级,做产品我们是认真的!

产品交流数栈君 发表了文章 • 0 个评论 • 193 次浏览 • 2023-07-13 10:26 • 来自相关话题

功能优化1.运行任务优化  体验优化说明  背景:在「数据开发」菜单中临时运行任务后,切换到其他菜单,运行的任务将会停止。体验优化说明:运行任务时切换菜单,不会停止正在执行的任务。(体验优化示意图)2.表生命周期逻辑优化  体验优化说明  背景:如果客户有大量... ...查看全部

袋鼠云产品功能更新报告06期(离线开发篇上)|数栈产品功能升级,做产品我们是认真的!

产品交流数栈君 发表了文章 • 0 个评论 • 270 次浏览 • 2023-07-13 10:23 • 来自相关话题

离线开发平台新增功能更新1.数据源  新增功能说明  背景:目前在数据源页面中查看 meta 数据源的 schema,只能在 jdbc url 中查看,对于用户来说不方便。新增功能说明:数据源页面展示当前项目的schema名称,以及能做meta schema的... ...查看全部

产品支持的部署模式有哪些?

回复

产品交流数栈君 回复了问题 • 1 人关注 • 1 个回复 • 211 次浏览 • 2023-05-08 17:14 • 来自相关话题

大佬们好,弱弱问下,如果sink和source字段不一致,我该怎么通过名称做映射,去配置chunjun的json啊

回复

Taier匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 189 次浏览 • 2023-03-28 11:38 • 来自相关话题

这个是什么问题呀?这玩意每天晚上扫描整个磁盘建索引

回复

Taier匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 195 次浏览 • 2023-03-16 13:54 • 来自相关话题

Taier是不是这里有问题,普罗米修斯没有配置成功

回复

Taier匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 200 次浏览 • 2023-03-13 16:23 • 来自相关话题

大佬,请教下,我用周期实例跑增量任务,但是实际效果还是全量追加的形式,请问是还需要怎么配置吗?

回复

Taier匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 175 次浏览 • 2023-03-13 16:22 • 来自相关话题

请问有人在配置sftp的时候遇到这个问题吗?taier的版本是1.3.0

回复

Taier群内解答 回复了问题 • 1 人关注 • 3 个回复 • 303 次浏览 • 2023-03-13 16:21 • 来自相关话题

源端如果是一个多表联合查询的sql,来进行数据同步,这种源端插件应该怎么传参呢?

回复

ChunJun数栈君 发起了问题 • 1 人关注 • 0 个回复 • 238 次浏览 • 2023-02-21 19:36 • 来自相关话题

有没有chunjun on k8s application模式的 启动命令呀

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 328 次浏览 • 2023-02-20 18:54 • 来自相关话题

我创建了greenplum数据源,但是任务类型里面也没有greenplum_sql类型的任务可选,这块功能是不是还未实现呢

回复

Taier群内解答 回复了问题 • 1 人关注 • 2 个回复 • 293 次浏览 • 2023-02-15 13:51 • 来自相关话题

数据可视化大屏实时准确反映数据,让管理者及时知悉公司运作情况

网友分享数栈君 发表了文章 • 0 个评论 • 41 次浏览 • 2023-11-10 17:38 • 来自相关话题

随着大数据时代的到来,企业管理的决策越来越倚重数据指标,通过数据指标了解公司运作的情况,产品生产销售情况,收入与支出情况等等,更大的作用是对商业趋势预测提供了决策依据,使公司提前布局未来,掌控市场。本文通过平台的《智慧管理》系列模板大屏进行分析数据可视化对企业... ...查看全部

数据分析的根基:数据采集的 4 大基本特征

网友分享数栈君 发表了文章 • 0 个评论 • 35 次浏览 • 2023-11-10 17:35 • 来自相关话题

相信大家都知道数据分析和数据挖掘的概念,但是你知道数据分析和数据挖掘的基础是什么吗?今日小编就和大家一起来了解一下数据分析、数据挖掘基础 —— 数据采集。数据采集是数据分析、挖掘的一个环节,在数据处理过程中是非常基本和重要的,但经常被忽视。但再好的分析原理、建... ...查看全部

大数据采集方式是什么?

网友分享数栈君 发表了文章 • 0 个评论 • 35 次浏览 • 2023-11-10 17:32 • 来自相关话题

数据分析中,不可或缺 “数据收集” 这一环节。数据收集是通过借助数据分析工具利用一定的收集方法,将想要利用的数据信息收集起来用于后面的数据分析、数据挖掘。所以数据收集也是数据分析的基础和上限。例如,某运动 APP 想要针对某部分用户制定某训练课程,需要收集这部... ...查看全部

数据大屏,仅仅是数据展示吗?

网友分享数栈君 发表了文章 • 0 个评论 • 36 次浏览 • 2023-11-10 17:26 • 来自相关话题

大数据时代,各行各业对数据价值的重视程度与日俱增。要想真正把数据的价值发挥出来,就需要对数据进行采集、加工、分析,最终以数据可视化的方式来展现数据分布的规律和特征,进而辅助决策。目前,数据大屏作为数据可视化的重要载体,已成为经营管理、指挥调度、战略决策、应急监... ...查看全部

云原生技术的前世今生

网友分享数栈君 发表了文章 • 0 个评论 • 24 次浏览 • 2023-11-10 17:21 • 来自相关话题

什么是云原生? 云原生的概念大家都有所耳闻,对于云原生中的一些具体技术,都有了解甚至很深入的研究。但是我们应该怎么定义云原生,通过与不同的人交流,每个人答案都不一样,有的是容器 + 微服务,有人说是分布式架构与声明式 API,pivotal 的 12 要素,C... ...查看全部

云计算技术的特点

网友分享数栈君 发表了文章 • 0 个评论 • 29 次浏览 • 2023-11-10 17:15 • 来自相关话题

美国国家标准与技术研究院(NIST)定义:云计算是一种按使用量付费的模式,这种模式提供可用的、便捷的、按需的网络访问,进入可配置的计算资源共享池(资源包括网络,服务器,存储,应用软件,服务),这些资源能够被快速提供,只需投入很少的管理工作,或与服务供应商进行很... ...查看全部

【RabbitMQ】什么是RabbitMQ?RabbitMQ有什么用?应用场景有那些?

知识百科数栈君 发表了文章 • 0 个评论 • 20 次浏览 • 2023-11-10 11:50 • 来自相关话题

kafka 分布式的情况下,如何保证消息的顺序消费?

知识百科数栈君 发表了文章 • 0 个评论 • 16 次浏览 • 2023-11-10 11:50 • 来自相关话题

Hive表锁机制原理以及各种场景的解决方案

知识百科数栈君 发表了文章 • 0 个评论 • 23 次浏览 • 2023-11-10 11:49 • 来自相关话题

Flink CDC MySQL同步MySQL错误记录

知识百科数栈君 发表了文章 • 0 个评论 • 24 次浏览 • 2023-11-10 11:49 • 来自相关话题