数据湖

Hadoop存算分离架构中异构数据源整合技术解析

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 19 小时前 • 来自相关话题

Hadoop存算分离架构是一种将存储和计算分离的架构设计，旨在优化资源利用率和性能。在大数据处理场景中，异构数据源整合技术是实现高效数据管理和分析的关键。本文将深入探讨Hadoop存算分离方案中的异构数据源整合技术，帮助读者理解其核心原理和实际应用。 1. ... ...查看全部

低代码环境下的指标数据湖架构设计与存储优化

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 19 小时前 • 来自相关话题

在低代码环境下，指标数据湖架构设计与存储优化是企业实现高效数据管理的关键步骤。本文将深入探讨如何通过低代码指标管理工具优化数据湖架构，并提升存储效率。 1. 低代码环境下的指标管理定义低代码指标管理是一种通过简化编码过程来实现指标定义、采集和分析的技术方法... ...查看全部

非结构化数据湖中数据湖恢复的事务日志同步

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种存储和管理大量非结构化数据的架构，这些数据包括文本、图像、音频、视频等。与传统的关系型数据库不同，非结构化数据湖允许以原始格式存储数据，而无需预先定义数据模式。这种灵活性使得非结构化数据湖成为大数据分析和人工智能应用的理想选择。 ... ...查看全部

非结构化数据湖中数据湖扩展的多级存储架构

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种用于存储和管理非结构化数据的架构，这些数据包括文本、图像、音频、视频等。随着数据量的快速增长，数据湖扩展成为企业关注的重点。多级存储架构是实现数据湖扩展的一种有效方法，它通过分层存储策略优化性能和成本。非结构化数据湖的关键概念非结构化... ...查看全部

非结构化数据湖中数据湖监控的实时容量分析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种存储和管理大量非结构化数据的系统，这些数据包括文本、图像、音频、视频等。在大数据运维中，实时容量分析对于确保数据湖的高效运行至关重要。本文将深入探讨如何在非结构化数据湖中进行数据湖监控的实时容量分析。非结构化数据湖的定义非结构化数据湖... ...查看全部

非结构化数据湖中数据湖备份的增量快照验证

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种灵活的数据存储架构，能够处理各种类型的数据，包括文本、图像、音频和视频等。在大数据运维中，数据湖备份的增量快照验证是确保数据完整性和一致性的关键步骤。本文将深入探讨如何在非结构化数据湖中实现这一过程。什么是增量快照验证？ ... ...查看全部

非结构化数据湖中数据湖监控的实时性能分析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种存储和管理大量非结构化数据的系统，这些数据包括文本、图像、音频、视频等。与传统的关系型数据库不同，非结构化数据湖能够灵活地存储和处理各种格式的数据，而无需预先定义数据模式。这种灵活性使得非结构化数据湖成为大数据分析和人工智能应用的重要基础设... ...查看全部

非结构化数据湖中数据湖恢复的事务日志清理

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种灵活的数据存储架构，能够处理来自多种来源的海量数据。在数据湖恢复过程中，事务日志清理是一个关键步骤，它确保了数据湖的性能和可靠性。本文将深入探讨如何在非结构化数据湖中进行事务日志清理，以优化数据恢复过程。什么是事务日志？事务日志记录了... ...查看全部

非结构化数据湖中数据湖备份的增量快照清理

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

在大数据运维中，非结构化数据湖的管理是一个复杂但至关重要的任务。非结构化数据湖通常包含大量未经过预定义模型或组织的数据，例如文本文件、图像、音频和视频等。这些数据的备份和清理对于确保数据湖的高效运行至关重要。本文将深入探讨如何在非结构化数据湖中进行增量快照清理... ...查看全部

非结构化数据湖中数据湖扩展的多租户隔离方案

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖是一种存储和管理大量非结构化数据的解决方案，这些数据包括文本、图像、音频、视频等。随着企业对数据湖的需求不断增长，多租户隔离方案成为确保数据安全和性能的关键。本文将深入探讨如何在非结构化数据湖中实现扩展的多租户隔离。 1. 非结构化数据... ...查看全部

10月25日直播预约丨《实时湖仓实践五讲》第三讲：实时湖仓在袋鼠云的落地实践之路

活动动态 • 数栈君发表了文章 • 0 个评论 • 1250 次浏览 • 2023-10-23 18:02 • 来自相关话题

如今，大规模、高时效、智能化数据处理已是“刚需”，企业需要更强大的数据平台，来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战，湖仓一体方案应运而生。《实时湖仓实践五讲》是袋鼠云打造的系列直播活动，将围绕实时湖仓的建设趋势和通用问题，邀请奋... ...查看全部

Apache Hudi 在袋鼠云数据湖平台的设计与实践

产品交流 • 数栈君发表了文章 • 0 个评论 • 973 次浏览 • 2023-05-26 16:38 • 来自相关话题

在大数据处理中，实时数据分析是一个重要的需求。随着数据量的不断增长，对于实时分析的挑战也在不断加大，传统的批处理方式已经不能满足实时数据处理的需求，需要一种更加高效的技术来解决这个问题。Apache Hudi（Hadoop Upserts Deletes an... ...查看全部

数据湖选型指南：Hudi vs Iceberg 数据更新能力深度对比

产品交流 • 数栈君发表了文章 • 0 个评论 • 3276 次浏览 • 2023-03-17 13:43 • 来自相关话题

数据湖作为新一代大数据基础设施，近年来持续火热，许多前线的同学都在讨论数据湖应该怎么建，许多企业也都在构建或者计划构建自己的数据湖。基于此，自然引发了许多关于数据湖选型的讨论和探究。但是经过搜索之后我们发现，网上现存的很多内容都是基于较早之前的开源信息做出的结... ...查看全部

袋鼠云的数据湖解决方案选型的是那个框架？Hudi、Iceberg还是Delta Lake

贡献

数据中台 • 群内解答回复了问题 • 1 人关注 • 1 个回复 • 1504 次浏览 • 2022-12-21 14:06 • 来自相关话题

数据中台实战：袋鼠云基于Iceberg构建的湖仓一体数据架构探索及实践，快速落地大数据转移、大数据平台开发

技术共享 • 数栈君发表了文章 • 0 个评论 • 2716 次浏览 • 2022-12-21 11:28 • 来自相关话题

“数据湖”、“湖仓一体”及“流批一体”等概念，是近年来大数据领域热度最高的词汇，在各大互联网公司掀起了一波波的热潮，各家公司纷纷推出了自己的技术方案，其中作为全链路数字化技术与服务提供商的袋鼠云，在探索数据湖架构的早期，就调研并选用了Iceberg作为基础框架... ...查看全部

打造智能标签体系，助力银行大零售业务转型丨杭州联合银行x袋鼠云

最佳实践 • 小美发表了文章 • 0 个评论 • 1153 次浏览 • 2022-12-13 11:12 • 来自相关话题

“智能标签平台上线后，支行及业务部门已创建多个客群用于营销，为我行客户精细化管理打下了良好基础。”杭州联合银行始终以服务市民、小微企业、经济组织和地方经济发展为己任，本着 “做小、做散、做深” 的原则，通过促进机制转型、优化业务流程、丰富产品体系、强化风险管控... ...查看全部

袋鼠云数据湖平台「DataLake」，存储全量数据，打造数字底座

产品交流 • 小美发表了文章 • 0 个评论 • 1409 次浏览 • 2022-11-25 11:39 • 来自相关话题

一、什么是数据湖？在探讨数据湖技术或如何构建数据湖之前，我们需要先明确，什么是数据湖？数据湖的起源，应该追溯到 2010 年 10 月。基于对半结构化、非结构化存储的需求，同时为了推广自家的 Pentaho 产品以及 Hadoop，2010 年 Pentaho... ...查看全部

taier怎么与prometheus集成呀

Taier • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 759 次浏览 • 2023-02-14 14:47 • 来自相关话题

袋鼠云的数据湖解决方案选型的是那个框架？Hudi、Iceberg还是Delta Lake

数据中台 • 群内解答回复了问题 • 1 人关注 • 1 个回复 • 1504 次浏览 • 2022-12-21 14:06 • 来自相关话题

Hadoop存算分离架构中异构数据源整合技术解析

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 19 小时前 • 来自相关话题

低代码环境下的指标数据湖架构设计与存储优化

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 19 小时前 • 来自相关话题

非结构化数据湖中数据湖恢复的事务日志同步

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖扩展的多级存储架构

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖监控的实时容量分析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖备份的增量快照验证

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖监控的实时性能分析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖恢复的事务日志清理

知识百科 • 数栈君发表了文章 • 0 个评论 • 4 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖备份的增量快照清理

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

非结构化数据湖中数据湖扩展的多租户隔离方案

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 21 小时前 • 来自相关话题

更多...

Hadoop存算分离架构中异构数据源整合技术解析

低代码环境下的指标数据湖架构设计与存储优化

非结构化数据湖中数据湖恢复的事务日志同步

非结构化数据湖中数据湖扩展的多级存储架构

非结构化数据湖中数据湖监控的实时容量分析

非结构化数据湖中数据湖备份的增量快照验证

非结构化数据湖中数据湖监控的实时性能分析

非结构化数据湖中数据湖恢复的事务日志清理

非结构化数据湖中数据湖备份的增量快照清理

非结构化数据湖中数据湖扩展的多租户隔离方案

taier怎么与prometheus集成呀

袋鼠云的数据湖解决方案选型的是那个框架？Hudi、Iceberg还是Delta Lake

Hadoop存算分离架构中异构数据源整合技术解析

低代码环境下的指标数据湖架构设计与存储优化

非结构化数据湖中数据湖恢复的事务日志同步

非结构化数据湖中数据湖扩展的多级存储架构

非结构化数据湖中数据湖监控的实时容量分析

非结构化数据湖中数据湖备份的增量快照验证

非结构化数据湖中数据湖监控的实时性能分析

非结构化数据湖中数据湖恢复的事务日志清理

非结构化数据湖中数据湖备份的增量快照清理

非结构化数据湖中数据湖扩展的多租户隔离方案

话题描述

相关话题

1 人关注该话题