博客 聊聊云原生大数据平台(九)——大数据平台建设

聊聊云原生大数据平台(九)——大数据平台建设

   数栈君   发表于 2023-01-10 14:30  348  0

数据平台建设

10.1 业务价值

最后值得一提的是,复杂的云数据平台建设不能仅仅是从技术角度出发去推动的。必须从业务(商业)的目标出发来发起和规划整个项目。数据平台的典型价值包括:

  1. 节流,提升业务运营效率,节约资产投入和各类运维成本。
  2. 开源,支撑营销优化,客户体验优化等场景,促进公司收入增长。
  3. 创新,通过优秀的产品能力,支撑业务的自助式数据分析与决策,快速探索新增长点。
  4. 合规,通过统一平台建设来满足各类数据方面的法规,政策,监管需求。

我们应该明确企业的业务诉求,针对性的设计数据战略和数据平台建设的规划。

10.2 建设路径

从前面的架构图看到,整个平台的组成是相当复杂的,一般需要经过几年的时间来逐渐搭建与完善。这与企业本身的在线化,数字化,智能化演进路线需要保持一致,而不是无视企业数据现状,上来就开发部署流式数据平台,机器学习平台等看起来更新潮的技术。

我们观远在成立早期就深入思考并提出了数据分析与智能决策在企业落地的 5A 落地路径方法论,包括从自助式分析,到场景化,自动化,增强化最终实现决策自动化的 5 个步骤。对应到数据平台的构建,也可以参考类似的策略框架,例如:

  1. 敏捷化,可以通过基础数仓体系搭建和自助式 BI 分析产品的应用来实现,达到“看见数据”的目标。
  2. 场景化,通过 metric layer 和 BI 产品中的应用市场,形成各个业务场景的最佳实践,让更多的用户知道“怎么看数据”。
  3. 自动化,需要平台有一定的编排能力,将各类分析结果与业务系统打通,自动化推送结果(反向 ETL),数据预警等,达到“数据追人”的效果。
  4. 增强化,在分析的基础上,进一步加入 AI 建模与预测的能力,需要平台支持算法类的数据处理与消费(如非结构化数据,notebook),实现“洞见未来”。
  5. 行动化,最终我们希望能在预测基础上更进一步,从分析型 AI 延展到行动化的 AI,需要平台提供更加综合的对外服务能力(API,实时数据,AB Test 等),结合一些低代码工具打造数据驱动的业务应用,有望实现“自动决策”。


http://dtstack-static.oss-cn-hangzhou.aliyuncs.com/2021bbs/files_user1/article/2549f17719782df54bffb4196f18d128..jpg

数据分析成熟度历程

10.3 用户推广

除了从技术架构层面的演进方法论,如何在业务层面对平台进行宣传与推广也是一个重要课题。有太多的数据平台项目都是缺乏深入的业务沟通理解,在双方缺乏一致认知的情况下,推进复杂项目,建设周期极为漫长,最终导致中途的失败。我们更应该通过一些小型项目快速体现平台价值,增进双方的共识,获取用户的信任,并逐渐推广到更多组织部门;在得到更多应用之后,也会带动场景,需求的丰富,反过来也可以指导和促进平台本身的建设与发展,进入一个良性循环。这也是我们在持续探索和实践的路线方法。

(文章来源于网络,如侵删)

相关链接:

聊聊云原生大数据平台(一)——数据平台架构 https://www.dtstack.com/bbs/article/428

聊聊云原生大数据平台(二)——数据获取  https://www.dtstack.com/bbs/article/469

聊聊云原生大数据平台(三)——数据存储 https://www.dtstack.com/bbs/article/470

聊聊云原生大数据平台(四)——数据处理 https://www.dtstack.com/bbs/article/471

聊聊云原生大数据平台(五)——元数据 https://www.dtstack.com/bbs/article/472

聊聊云原生大数据平台(六)——数据消费 https://www.dtstack.com/bbs/article/473

聊聊云原生大数据平台(七)——流程编排与 ETL https://www.dtstack.com/bbs/article/474

聊聊云原生大数据平台(八)——数仓最佳实践 https://www.dtstack.com/bbs/article/475

聊聊云原生大数据平台(九)——大数据平台建设 https://www.dtstack.com/bbs/article/476

袋鼠云在大数据领域深耕7年,拥有丰富的大数据平台建设经验和成熟的产品体系,想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs

同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack

0条评论
社区公告
  • 大数据领域最专业的产品&技术交流社区,专注于探讨与分享大数据领域有趣又火热的信息,专业又专注的数据人园地

最新活动更多
微信扫码获取数字化转型资料
钉钉扫码加入技术交流群