数栈DTinsight_一站式数据开发与治理-袋鼠云

产品与服务

解决方案

客户成功

生态合作

袋鼠开源

资料中心

袋鼠社区

关于袋鼠云

申请试用

数栈DTinsight

一站式数据开发与治理

数栈（DTinsight），袋鼠云打造的一站式大数据开发治理平台，包括离线数据开发、实时数据开发、数据服务、数据资产四款产品，在数据采集、加工、统一服务的基础上，将全域数据资产汇聚、统一数据治理融合其中，缩短数据价值的萃取过程，提高企业提炼数据价值的能力

产品优势

核心技术

应用场景

产品架构

产品优势

全域数据治理

依托于数栈，实现以数据中台为核心的全域数据治理，通过资产汇聚、数据标准定义、数据模型管理、数据稽核、数据资产运营与应用能力，以产品化的方式提升企业数据治理水平

DataOps

通过多环境对接、团队协作、代码版本、预检查、数据测试、质量稽核、全域资产统计等多种措施，实现企业内的数据团队更高效、更高质量、自动化的数据产出，提升企业内数据生产力。

金融级安全保障

从系统安全、数据安全、服务安全、行为审计4个维度，全方面保障数据安全，可控制库、表、列级权限控制，同时支持分级分类、数据脱敏、数据服务行级权限、传输加密等高级特性

数据还原

通过历史数据同步+实时数据还原+实时结构还原3个方面，建立异构数据源之间的实时还原通道，实现异构数据库的实时镜像，解决海量数据下的实时采集、实时分析等场景。

核心技术

自研数据同步引擎

自研批流统一的分布式数据同步引擎Chunjun，已适配30+种不同的数据存储系统，可在任意方向之间进行数据读/写，同时支持高并发同步、断点续传、脏数据管理等功能

自研分布式调度引擎

自研DAG任务调度引擎Taier，支持Master-Workder分布式架构，支持百万级别并发调度，灵活对接Hadoop、JDBC、Shell Agent等丰富的任务运行环境，保障海量离线任务可靠运行

全链路血缘解析

覆盖数据采集、加工、服务、应用的全过程，通过智能化的SQL解析，还原数据在中台内的流转过程，细粒度展现表级、字段级血缘图谱，实现全生命周期的数据追踪

高性能数据服务网关

自研分布式数据服务网关Gateway，可根据业务流量横向扩缩容，具备高并发调用、API限流、鉴权、熔断、行级权限、服务编排等多种核心能力，为各业务方提供稳定的数据服务能力

应用场景

离线数仓升级

客户之前可能使用关系型数据库或开源Hadoop搭建了离线数仓，随着数据体量的快速增长、业务需求的愈加复杂，需要采用平台化的开发方式，客户可基于数栈进行数据全链路研发，包括数据集成、数据开发和ETL 、转换及计算等开发，以及数据作业的调度、监控、告警，提升数据开发效率，并基于数据服务模块提供统一数据服务API能力

实时数仓建设

诸如金融风控、实时营销、实时经营分析等高实时性的业务，传统离线数仓的更新频率无法满足要求，需采用实时计算技术提升数据响应及时度，满足业务需求，客户可基于数栈实时开发平台，使用Flink进行实时ETL、结果入库，并对任务监控运维，大幅提升数据产出效率，解决业务痛点

基于数据中台的数据治理

企业传统的「重开发、轻治理」的模式，可能造成数据标准混乱、数据建模不规范、重复计算、数据冗余等各类问题，需要将数据治理过程与数据开发过程相融合，实现围绕开发过程的数据治理，客户可基于数栈的数据治理能力，利用统一数据标准、统一建模、统一元数据检索等能力，快速提升企业数据治理水平

集团型数据中台

集团型企业大多存在多业态、多子公司的情况，其在总-分管理方式、资源隔离方式、权限隔离方式等方面有较高的管理要求，且不同的集团型客户存在一定差异，客户可基于数栈的多集群、多租户、多项目模式，结合资源组管理、队列资源管理等能力，根据自身业务需求进行调整与适配，打造适合自身业务发展的集团型数据中台

产品架构