1.1数据中台的定义数据中台不是数据平台,数据中台是处于业务前台和技术后台的中间层,是对业务提供的数据能力的抽象和共享的过程,数据中台通过将企业的数据变成数据资产,并提供数据能力组件和运行机制,形成聚合数据接入、集成、清洗加工、建模处理、挖掘分析,并以共享服务...
2019 年 1 月 28 日,阿里云宣布开源 “计算王牌” 实时计算平台 Blink 回馈给 ApacheFlink 社区。官方称,计算延迟已经降到毫秒级,也就是你在浏览网页的时候,眨了一下眼睛,淘宝、天猫处理的信息已经刷新了 17 亿次。作为一家对技术有追...
时常会有开发的同学突然紧张兮兮地找我,然后丢给我一个代码层面的CannotAcquireLockException 的报错,一脸无辜地问我是不是自己搞出了一个死锁。 好像大家看到 LOCK 的字眼总会第一时间想到死锁而忽略了锁,难道我们锁没有面子的嘛,我们锁的...
袋鼠云日志团队时常遇到各种各样的甲方大人,毕竟我们是一个非常优秀的企业服务公司(自信满满),当然面对甲方大人的时候要做到处变不惊,临危不乱,镇定自若的接受需求…… 甲方大人的常用台词一定要记住:我们很忙,有好几套监控系统,能不能再不砍掉监控系统的情况下,帮助我...
这次,我们来谈一下数据标准管理。数据标准(Data Standard)的定义是指保障数据定义和使用的一致性、准确性和完整性的规范性约束。于企业而言,数据标准是对数据的命名、数据类型、长度、业务含义、业务规则,计算口径、归属部门等,定义一套统一的标准规范,以此来...
在过去的很长一段时间,大数据领域中构建可扩展的分布式应用框架中,Apache Hadoop 占据的是绝对的统治地位。 目前绝大多数大数据平台都是基于 Hadoop 生态构建,使用 YARN 作为核心组件进行资源管理与资源调度,但是这些大数据平台普遍都会存在资源...
2022 年 4 月 16 日,神十三在东风着陆场预定区域成功着陆。接下来从 5 月开始,我国还将进行 6 次飞行任务,在今年内完成中国空间站的在轨建造。而以目前情况推测,在国际空间站退役后,中国空间站将极可能在相当一段时间内,成为世界唯一一个空间站。网友纷纷...
金融业天然就是一个经营数据的行业,一直对数字技术保持高度重视,是数字化转型最早和数字技术应用最广的行业之一。在金融和技术融合过程中,数据治理是关键。当前金融数据治理已由过去局部数据管理,发展到统筹数据整合、智能应用、数据驱动决策和数据开放融合,这对金融数据治理...
弹指之间,时光已步入2023年。在过去的一年里,作为数字化浪潮的弄潮儿,袋鼠云积极投身其中,用专业、稳健书写这一年,创造了许多闪光时刻。接下来,我们将推出系列回顾,从大事件、荣誉资质、签约客户、生态成果等层面,为大家一一呈现,我们的“2022年成绩单”。一月:...
随着大数据时代的发展,海量数据和多种业务的实时处理需求激增,比如:实时监控报警系统、实时风控系统、实时推荐系统等,传统的批处理方式和早期的流式处理框架因其自身的局限性,难以在延迟性、吞吐量、容错能力以及使用便捷性等方面满足业务日益苛刻的要求。在过去的几年里,从...