计算任务

计算任务

国产自研数据底座：分布式架构与高可用性实现

知识百科 • 数栈君 发表了文章 • 0 个评论 • 60 次浏览 • 2026-02-06 08:37 • 来自相关话题

随着数字化转型的深入推进，数据作为企业核心资产的重要性日益凸显。数据底座（Data Foundation）作为支撑企业数据管理和应用的核心平台，其架构设计和性能表现直接影响企业的数据利用效率和业务连续性。在国产化替代和技术自主可控的大背景下，国产自研数据底座逐... ...查看全部

Hadoop存算分离方案：高效扩展与资源优化实现

知识百科 • 数栈君 发表了文章 • 0 个评论 • 98 次浏览 • 2025-11-06 14:19 • 来自相关话题

在大数据时代，Hadoop作为分布式计算框架，广泛应用于数据存储和计算任务中。然而，随着数据量的快速增长和业务需求的不断变化，传统的Hadoop架构在扩展性和资源利用率方面逐渐暴露出瓶颈。为了应对这些挑战，Hadoop存算分离方案应运而生，成为企业优化资源管理... ...查看全部

深入解析Spark性能调优的核心方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 112 次浏览 • 2025-10-06 12:20 • 来自相关话题

深入解析Spark性能调优的核心方法在大数据时代，Apache Spark 已经成为企业处理海量数据的核心工具之一。然而，随着数据规模的不断扩大和应用场景的日益复杂，如何优化 Spark 的性能成为了企业面临的重要挑战。本文将从 Spark 的核心机制、性能调... ...查看全部

AI分析驱动的实时数据流处理技术

知识百科 • 数栈君 发表了文章 • 0 个评论 • 317 次浏览 • 2025-09-17 21:28 • 来自相关话题

AI分析驱动的实时数据流处理技术一、实时数据流处理技术概述实时数据流处理技术是指在数据生成的同时对其进行处理，从而实现快速响应和决策。这种技术在物联网、金融交易、社交网络等领域有着广泛的应用。实时数据流处理技术可以分为两大类：基于微批处理的实时处理和基于流处理... ...查看全部

集团指标平台建设：基于Flink的实时计算架构

知识百科 • 数栈君 发表了文章 • 0 个评论 • 224 次浏览 • 2025-09-17 20:37 • 来自相关话题

集团指标平台建设：基于Flink的实时计算架构集团指标平台建设是企业数字化转型中的重要一环，它能够帮助企业实时监控业务状态，及时发现业务问题，提高决策效率。本文将介绍如何基于Flink构建集团指标平台的实时计算架构。一、实时计算架构概述实时计算架构是集团指标平... ...查看全部

流计算实时数据处理架构设计

知识百科 • 数栈君 发表了文章 • 0 个评论 • 227 次浏览 • 2025-09-17 16:56 • 来自相关话题

流计算实时数据处理架构设计流计算是一种实时处理数据的技术，它能够处理连续不断的数据流，实时地进行数据处理和分析。流计算架构设计是实现流计算的关键，它决定了流计算系统的性能、可靠性和可扩展性。本文将介绍流计算实时数据处理架构设计的基本概念、设计原则和实现方法。#... ...查看全部

Hadoop分布式存储与MapReduce实现原理详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 362 次浏览 • 2025-09-17 16:35 • 来自相关话题

Hadoop是一个开源框架，用于存储大量数据并运行分布式应用。它在大数据处理方面具有强大的功能，支持在廉价的计算机集群上运行。Hadoop由两个主要组件组成：HDFS（Hadoop分布式文件系统）和MapReduce。HDFS是一个分布式文件系统，它将文件拆分... ...查看全部

批计算架构设计与分布式任务调度优化

知识百科 • 数栈君 发表了文章 • 0 个评论 • 258 次浏览 • 2025-09-17 16:12 • 来自相关话题

批计算架构设计与分布式任务调度优化批计算架构设计批处理计算是一种常见的数据处理方式，通常用于处理大量数据，如日志文件、数据库记录等。批处理计算通常需要将数据从存储系统中读取出来，进行计算，然后将结果写回到存储系统中。因此，批处理计算架构设计需要考虑以下几个方面... ...查看全部

Hadoop分布式存储与MapReduce计算原理详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 256 次浏览 • 2025-09-17 14:44 • 来自相关话题

Hadoop是一个开源框架，用于存储大量数据并运行分布式应用。它主要由HDFS（Hadoop分布式文件系统）和MapReduce组成。HDFS用于存储数据，而MapReduce则用于处理数据。本文将详细介绍Hadoop的分布式存储和MapReduce计算原理。... ...查看全部

Tez DAG 调度优化：动态并行与资源感知策略

知识百科 • 数栈君 发表了文章 • 0 个评论 • 201 次浏览 • 2025-09-16 12:21 • 来自相关话题

Tez DAG 调度优化：动态并行与资源感知策略一、Tez DAG 调度优化概述Tez 是一个开源的分布式计算框架，它为 Hadoop 生态系统提供了一个更灵活的计算模型。Tez 通过将计算任务分解为一系列的有向无环图（DAG）来执行复杂的计算任务。Tez D... ...查看全部
更多...

国产自研数据底座：分布式架构与高可用性实现

知识百科 • 数栈君 发表了文章 • 0 个评论 • 60 次浏览 • 2026-02-06 08:37 • 来自相关话题

随着数字化转型的深入推进，数据作为企业核心资产的重要性日益凸显。数据底座（Data Foundation）作为支撑企业数据管理和应用的核心平台，其架构设计和性能表现直接影响企业的数据利用效率和业务连续性。在国产化替代和技术自主可控的大背景下，国产自研数据底座逐... ...查看全部

Hadoop存算分离方案：高效扩展与资源优化实现

知识百科 • 数栈君 发表了文章 • 0 个评论 • 98 次浏览 • 2025-11-06 14:19 • 来自相关话题

在大数据时代，Hadoop作为分布式计算框架，广泛应用于数据存储和计算任务中。然而，随着数据量的快速增长和业务需求的不断变化，传统的Hadoop架构在扩展性和资源利用率方面逐渐暴露出瓶颈。为了应对这些挑战，Hadoop存算分离方案应运而生，成为企业优化资源管理... ...查看全部

深入解析Spark性能调优的核心方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 112 次浏览 • 2025-10-06 12:20 • 来自相关话题

深入解析Spark性能调优的核心方法在大数据时代，Apache Spark 已经成为企业处理海量数据的核心工具之一。然而，随着数据规模的不断扩大和应用场景的日益复杂，如何优化 Spark 的性能成为了企业面临的重要挑战。本文将从 Spark 的核心机制、性能调... ...查看全部

AI分析驱动的实时数据流处理技术

知识百科 • 数栈君 发表了文章 • 0 个评论 • 317 次浏览 • 2025-09-17 21:28 • 来自相关话题

AI分析驱动的实时数据流处理技术一、实时数据流处理技术概述实时数据流处理技术是指在数据生成的同时对其进行处理，从而实现快速响应和决策。这种技术在物联网、金融交易、社交网络等领域有着广泛的应用。实时数据流处理技术可以分为两大类：基于微批处理的实时处理和基于流处理... ...查看全部

集团指标平台建设：基于Flink的实时计算架构

知识百科 • 数栈君 发表了文章 • 0 个评论 • 224 次浏览 • 2025-09-17 20:37 • 来自相关话题

集团指标平台建设：基于Flink的实时计算架构集团指标平台建设是企业数字化转型中的重要一环，它能够帮助企业实时监控业务状态，及时发现业务问题，提高决策效率。本文将介绍如何基于Flink构建集团指标平台的实时计算架构。一、实时计算架构概述实时计算架构是集团指标平... ...查看全部

流计算实时数据处理架构设计

知识百科 • 数栈君 发表了文章 • 0 个评论 • 227 次浏览 • 2025-09-17 16:56 • 来自相关话题

流计算实时数据处理架构设计流计算是一种实时处理数据的技术，它能够处理连续不断的数据流，实时地进行数据处理和分析。流计算架构设计是实现流计算的关键，它决定了流计算系统的性能、可靠性和可扩展性。本文将介绍流计算实时数据处理架构设计的基本概念、设计原则和实现方法。#... ...查看全部

Hadoop分布式存储与MapReduce实现原理详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 362 次浏览 • 2025-09-17 16:35 • 来自相关话题

Hadoop是一个开源框架，用于存储大量数据并运行分布式应用。它在大数据处理方面具有强大的功能，支持在廉价的计算机集群上运行。Hadoop由两个主要组件组成：HDFS（Hadoop分布式文件系统）和MapReduce。HDFS是一个分布式文件系统，它将文件拆分... ...查看全部

批计算架构设计与分布式任务调度优化

知识百科 • 数栈君 发表了文章 • 0 个评论 • 258 次浏览 • 2025-09-17 16:12 • 来自相关话题

批计算架构设计与分布式任务调度优化批计算架构设计批处理计算是一种常见的数据处理方式，通常用于处理大量数据，如日志文件、数据库记录等。批处理计算通常需要将数据从存储系统中读取出来，进行计算，然后将结果写回到存储系统中。因此，批处理计算架构设计需要考虑以下几个方面... ...查看全部

Hadoop分布式存储与MapReduce计算原理详解

知识百科 • 数栈君 发表了文章 • 0 个评论 • 256 次浏览 • 2025-09-17 14:44 • 来自相关话题

Hadoop是一个开源框架，用于存储大量数据并运行分布式应用。它主要由HDFS（Hadoop分布式文件系统）和MapReduce组成。HDFS用于存储数据，而MapReduce则用于处理数据。本文将详细介绍Hadoop的分布式存储和MapReduce计算原理。... ...查看全部

Tez DAG 调度优化：动态并行与资源感知策略

知识百科 • 数栈君 发表了文章 • 0 个评论 • 201 次浏览 • 2025-09-16 12:21 • 来自相关话题

Tez DAG 调度优化：动态并行与资源感知策略一、Tez DAG 调度优化概述Tez 是一个开源的分布式计算框架，它为 Hadoop 生态系统提供了一个更灵活的计算模型。Tez 通过将计算任务分解为一系列的有向无环图（DAG）来执行复杂的计算任务。Tez D... ...查看全部
没有更多了...
热门产品
数雁EasyDigit 数栈DTinsight 数驹DTengine 易知微EasyV
解决方案
政务解决方案 港口解决方案 基金解决方案 制造解决方案 保险解决方案 高校解决方案 证券解决方案 文旅解决方案 银行解决方案 大宗商品解决方案
快速入口
合作与生态 开源社区 Github
联系我们

合作咨询 market@dtstack.com

联系电话 400-002-1024

总部地址 杭州市余杭区五常街道阿里巴巴数字生态创新园4号楼袋鼠云

袋鼠云官方订阅号
袋鼠云官方订阅号
热门搜索：
数据中台 企业数据中台 金融数据中台 离线数据中台 数据中台公司 一站式数据中台 数据中台开发 一站式数据开发 数据中台解决方案 大数据分析 数据分析平台 新基建 大数据开发 大数据开发平台 数据化转型解决方案 信创 数据可视化 数字孪生 可视化大屏 数字化转型

友情链接： 易知微 云掣

@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号