存储压缩

存储压缩

HDFS erasure coding部署指南与配置实践

知识百科 • 数栈君 发表了文章 • 0 个评论 • 96 次浏览 • 2026-03-30 09:39 • 来自相关话题

HDFS Erasure Coding 部署指南与配置实践在数据中台架构日益复杂的今天，企业对海量非结构化数据的存储成本与可靠性提出了更高要求。传统HDFS三副本机制虽然保障了数据高可用，但其高达200%的存储开销已成为大规模集群的沉重负担。HDFS Eras... ...查看全部

Oracle RMAN增量备份实现与恢复详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 79 次浏览 • 2026-03-29 11:30 • 来自相关话题

Oracle RMAN增量备份是企业级数据库运维中保障数据安全、降低存储开销、缩短备份窗口的核心技术。尤其在数据中台架构下，数据库规模庞大、变更频繁，全量备份已无法满足效率与成本的双重需求。RMAN（Recovery Manager）作为Oracle官方提供的... ...查看全部

Hive SQL小文件合并优化方案

知识百科 • 数栈君 发表了文章 • 0 个评论 • 64 次浏览 • 2026-03-28 16:11 • 来自相关话题

在大数据处理架构中，Hive 作为数据仓库的核心引擎，广泛应用于企业级数据中台、数字孪生建模与可视化分析系统。然而，随着数据写入频率的提升和任务调度的复杂化，Hive 表中常出现大量小文件（通常指小于 HDFS 块大小 128MB 或 256MB 的文件），这... ...查看全部

Oracle RMAN增量备份配置与实现详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 89 次浏览 • 2026-03-28 08:32 • 来自相关话题

Oracle RMAN增量备份配置与实现详解 🛡️在现代企业数据架构中，数据库的高可用性与数据恢复能力是保障业务连续性的核心要素。对于运行在Oracle数据库环境中的数据中台、数字孪生系统或实时可视化平台而言，任何数据丢失或恢复延迟都可能导致决策失效、模型偏差... ...查看全部

Hive SQL小文件合并优化方案

知识百科 • 数栈君 发表了文章 • 0 个评论 • 82 次浏览 • 2026-03-27 17:47 • 来自相关话题

在大数据处理与分析场景中，Hive SQL 作为数据仓库的核心查询引擎，广泛应用于企业数据中台、数字孪生建模与可视化分析系统。然而，随着数据写入频率的提升和任务调度的复杂化，Hive 表中常出现大量小文件堆积的问题。这些小文件不仅占用 NameNode 元数据... ...查看全部

Hive SQL小文件优化技巧：文件合并与存储压缩

知识百科 • 数栈君 发表了文章 • 0 个评论 • 120 次浏览 • 2025-09-23 17:16 • 来自相关话题

在大数据处理领域，Hive SQL作为重要的数据仓库工具，常常面临小文件带来的性能瓶颈。小文件不仅会导致资源浪费，还会影响查询效率，甚至影响整个数据中台的运行稳定性。本文将深入探讨Hive SQL中小文件优化的两种核心方法：文件合并与存储压缩，帮助企业用户提升... ...查看全部

Spark参数调优实战指南：性能提升关键技术解析

知识百科 • 数栈君 发表了文章 • 0 个评论 • 217 次浏览 • 2025-07-01 17:35 • 来自相关话题

Spark 参数调优实战指南 在大数据处理和分析领域，Apache Spark 已经成为最受欢迎的开源工具之一。然而，尽管 Spark 提供了强大的分布式计算能力，其性能表现仍然高度依赖于参数配置。企业用户在使用 Spark 进行数据分析和处理时... ...查看全部
没有更多了...

HDFS erasure coding部署指南与配置实践

知识百科 • 数栈君 发表了文章 • 0 个评论 • 96 次浏览 • 2026-03-30 09:39 • 来自相关话题

HDFS Erasure Coding 部署指南与配置实践在数据中台架构日益复杂的今天，企业对海量非结构化数据的存储成本与可靠性提出了更高要求。传统HDFS三副本机制虽然保障了数据高可用，但其高达200%的存储开销已成为大规模集群的沉重负担。HDFS Eras... ...查看全部

Oracle RMAN增量备份实现与恢复详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 79 次浏览 • 2026-03-29 11:30 • 来自相关话题

Oracle RMAN增量备份是企业级数据库运维中保障数据安全、降低存储开销、缩短备份窗口的核心技术。尤其在数据中台架构下，数据库规模庞大、变更频繁，全量备份已无法满足效率与成本的双重需求。RMAN（Recovery Manager）作为Oracle官方提供的... ...查看全部

Hive SQL小文件合并优化方案

知识百科 • 数栈君 发表了文章 • 0 个评论 • 64 次浏览 • 2026-03-28 16:11 • 来自相关话题

在大数据处理架构中，Hive 作为数据仓库的核心引擎，广泛应用于企业级数据中台、数字孪生建模与可视化分析系统。然而，随着数据写入频率的提升和任务调度的复杂化，Hive 表中常出现大量小文件（通常指小于 HDFS 块大小 128MB 或 256MB 的文件），这... ...查看全部

Oracle RMAN增量备份配置与实现详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 89 次浏览 • 2026-03-28 08:32 • 来自相关话题

Oracle RMAN增量备份配置与实现详解 🛡️在现代企业数据架构中，数据库的高可用性与数据恢复能力是保障业务连续性的核心要素。对于运行在Oracle数据库环境中的数据中台、数字孪生系统或实时可视化平台而言，任何数据丢失或恢复延迟都可能导致决策失效、模型偏差... ...查看全部

Hive SQL小文件合并优化方案

知识百科 • 数栈君 发表了文章 • 0 个评论 • 82 次浏览 • 2026-03-27 17:47 • 来自相关话题

在大数据处理与分析场景中，Hive SQL 作为数据仓库的核心查询引擎，广泛应用于企业数据中台、数字孪生建模与可视化分析系统。然而，随着数据写入频率的提升和任务调度的复杂化，Hive 表中常出现大量小文件堆积的问题。这些小文件不仅占用 NameNode 元数据... ...查看全部

Hive SQL小文件优化技巧：文件合并与存储压缩

知识百科 • 数栈君 发表了文章 • 0 个评论 • 120 次浏览 • 2025-09-23 17:16 • 来自相关话题

在大数据处理领域，Hive SQL作为重要的数据仓库工具，常常面临小文件带来的性能瓶颈。小文件不仅会导致资源浪费，还会影响查询效率，甚至影响整个数据中台的运行稳定性。本文将深入探讨Hive SQL中小文件优化的两种核心方法：文件合并与存储压缩，帮助企业用户提升... ...查看全部

Spark参数调优实战指南：性能提升关键技术解析

知识百科 • 数栈君 发表了文章 • 0 个评论 • 217 次浏览 • 2025-07-01 17:35 • 来自相关话题

Spark 参数调优实战指南 在大数据处理和分析领域，Apache Spark 已经成为最受欢迎的开源工具之一。然而，尽管 Spark 提供了强大的分布式计算能力，其性能表现仍然高度依赖于参数配置。企业用户在使用 Spark 进行数据分析和处理时... ...查看全部
没有更多了...
热门产品
数雁EasyDigit 数栈DTinsight 数驹DTengine 易知微EasyV
解决方案
政务解决方案 港口解决方案 基金解决方案 制造解决方案 保险解决方案 高校解决方案 证券解决方案 文旅解决方案 银行解决方案 大宗商品解决方案
快速入口
合作与生态 开源社区 Github
联系我们

合作咨询 market@dtstack.com

联系电话 400-002-1024

总部地址 杭州市余杭区五常街道阿里巴巴数字生态创新园4号楼袋鼠云

袋鼠云官方订阅号
袋鼠云官方订阅号
热门搜索：
数据中台 企业数据中台 金融数据中台 离线数据中台 数据中台公司 一站式数据中台 数据中台开发 一站式数据开发 数据中台解决方案 大数据分析 数据分析平台 新基建 大数据开发 大数据开发平台 数据化转型解决方案 信创 数据可视化 数字孪生 可视化大屏 数字化转型

友情链接： 易知微 云掣

@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号