数据库产品越来越多,各家云厂商也都推出基于开源 MySQL、Postgre 等的关系型数据库产品,多副本、高可用、读写分离、分库分表等功能更是集成在各类产品中,降低了机房建设和运维成本,助力更多的客户上云。唯独鲜见 Oracle 的云产品输出,除非是 Orac...
一、数据治理体系数据治理体系内容从两个维度来看:1)数据治理难点痛点:数据脉络不清晰、数据汇聚能力不足、数据管控能力薄弱、数据治理体系不完善、开放形式不完善。2)数据治理5个核心:理、聚、管、治、用。数据治理体系主要包含内容有数据标准、元数据、数据建模、数据集...
2020 年春节期间,一场突如其来的疫情在全国蔓延开来,打破了大家原有的工作生活节奏。疫情期间,大家宅在家就能随时看到实时的大数据疫情地图,可以随时刷到自己当前感兴趣的抖音视频,这一切背后依赖的最重要的技术,就是实时大数据处理技术。现在疫情即将过去,国家提出要...
从马车到汽车是为了提升运输效率,而随着时代的发展,如今我们又希望用自动驾驶把驾驶员从开车这项体力劳动中解放出来,增加运行效率,同时也可减少交通事故发生率,这也是企业对于智能运维的诉求。从人工运维到自动化运维是为了减少人力成本,降低操作风险,提高运维效率,但自动...
一、前言随着技术不断的成熟及市场需求的日益旺盛,实时开发已经成为当前大数据开发不可或缺的一部分。在整个实时开发的链路中,数据采集需要写入到 Kafka,数据处理也需要使用到 Kafka。今天我们就针对 Kafka 这个时下主流的消息中间件进行简单的介绍。二、消...
如果把企业数字化转型比作一辆自行车,那么技术与数据便是这辆车的两个轮子,骑在车上的则是企业战略、文化以及各种资源,它们决定了转型将走向哪个方向。不管数字化转型之路多么正确、战术如何高明,其最终结果还是要通过这两个轮子落地。DT 时代,“大数据” 不是强调量大,...
“ 数据剖析是开展数据质量初始评估的重要技术手段。结合数据特征剖析结果与所掌握的质量预期,证明或证伪关于数据质量的假设和线索,获取质量问题存在的形式和严重程度,为下一阶段数据质量实施提供指导。”Data profile可翻译为数据剖析或数据探查,是借助统计学知...
企业三界:业务界面,应用界面,数据界面1企 业 三 界本篇文章阐述「企业业务」、「企业信息化」,「企业数据化」三者之间的关系。界面是一个很宏观的东西,玄幻小说里所谓的人界,地界,天界,都用界面这个词来描述。之所以用到界面这个词:第一说明它所划分的东西很宏大;第...
数据中台之数据质量检测1数据中台如果是一台机器的话,进入的是数据,输出的也是数据。但在数据圈子还有另一句话,那就是“垃圾进,垃圾出”。数据质量不行、没有数据、数据不够丰富都会大大影响数据应用的最终产出。回想起上一代数据仓库、数据中心的方案,其建设内容的高度与业...
数据中台之数据源1数据产生当今企业在发展和经营的过程中,「信息化」早已是建设标准,在企业运作的过程中,或多或少地,积累了很多数据。在进入到DT时代,数据成为企业未来成长的引擎也越来越被认可。有先见之明的企业更注重于从方方面面来收集各项数据。我们今天的话题就以数...