Hadoop

Hadoop

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 137 次浏览 • 2026-03-30 12:24 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在企业级大数据平台中，Hadoop YARN 作为资源调度与任务管理的核心组件，承担着海量批处理、流式计算和机器学习任务的调度职责。当任务在集群中失败、性能异常或逻辑错误时，仅依赖日志文件进行排查往往效率低... ...查看全部

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 175 次浏览 • 2026-03-29 20:54 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在企业级大数据平台中，Hadoop YARN 作为资源调度与任务管理的核心组件，承担着海量批处理、流式计算和机器学习任务的调度职责。当任务在生产集群中失败、性能异常或逻辑错误时，仅靠日志分析往往难以定位根本... ...查看全部

远程调试Hadoop集群YARN与MapReduce方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 147 次浏览 • 2026-03-29 20:32 • 来自相关话题

远程调试 Hadoop 集群 YARN 与 MapReduce 方法 🛠️在现代数据中台架构中，Hadoop 生态系统依然是支撑大规模批处理任务的核心引擎。YARN（Yet Another Resource Negotiator）负责资源调度，MapReduc... ...查看全部

远程调试Hadoop集群JVM调试方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 166 次浏览 • 2026-03-29 19:21 • 来自相关话题

远程调试 Hadoop 集群 JVM 是大数据平台运维与开发中的一项关键技能，尤其在数据中台架构日益复杂的今天，当 MapReduce 任务、Spark 应用或 YARN 容器出现性能瓶颈、内存溢出或逻辑异常时，仅靠日志分析往往难以定位根本原因。此时，启用 J... ...查看全部

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 147 次浏览 • 2026-03-29 18:23 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统依然是处理海量批处理任务的核心引擎。YARN（Yet Another Resource Negotiator）作为 Hadoop 2.x 之后的资源调度框架，... ...查看全部

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 143 次浏览 • 2026-03-29 16:51 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统依然是处理海量离线计算任务的核心引擎。YARN（Yet Another Resource Negotiator）作为 Hadoop 2.x 之后的资源调度框架... ...查看全部

远程调试Hadoop集群YARN与MapReduce方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 149 次浏览 • 2026-03-29 13:45 • 来自相关话题

远程调试 Hadoop 集群 YARN 与 MapReduce 方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统仍是处理海量离线数据的核心引擎。尤其在构建数字孪生、日志分析、批处理报表等场景中，MapReduce 作业的稳定性与性能直接影响业务决策的... ...查看全部

远程调试Hadoop集群JVM参数配置方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 167 次浏览 • 2026-03-29 13:16 • 来自相关话题

远程调试 Hadoop 集群 JVM 参数配置方法 🛠️在构建企业级数据中台、实现数字孪生系统或部署大规模数据可视化平台时，Hadoop 集群作为底层数据处理引擎，其稳定性与性能直接影响整个系统的可靠性。当集群出现任务失败、内存溢出、GC 频繁或响应延迟等异常... ...查看全部

远程调试Hadoop集群YARN与MapReduce方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 151 次浏览 • 2026-03-29 10:55 • 来自相关话题

远程调试 Hadoop 集群 YARN 与 MapReduce 方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统仍是处理海量离线批处理任务的核心引擎。尤其在构建数字孪生、日志分析、用户行为建模等场景时，MapReduce 作业的稳定性与性能直接影响数... ...查看全部

Hadoop存算分离架构与HDFS+S3实现方案

知识百科 • 数栈君 发表了文章 • 0 个评论 • 117 次浏览 • 2026-03-29 09:55 • 来自相关话题

Hadoop存算分离架构与HDFS+S3实现方案在数据中台、数字孪生与数字可视化等现代数据架构中，计算与存储的解耦已成为提升系统弹性、降低成本、增强扩展性的核心趋势。Hadoop存算分离方案正是这一趋势下的关键实践路径。传统Hadoop集群将计算（MapRed... ...查看全部
更多...

国产化方案如何破解数据迁移困局？

产品交流 • 数栈君 发表了文章 • 0 个评论 • 1459 次浏览 • 2025-05-27 15:24 • 来自相关话题

在当下，Cloudera CDH/HDP 停止更新，CDP 订阅成本急剧攀升，与此同时，金融、能源等行业的国产化政策加速落地。种种因素叠加，企业正面临着从传统大数据平台向国产化架构迁移的紧迫需求。本文将深度剖析大数据迁移过程中的四大核心挑战，并给出三大行之有效... ...查看全部

AI已经很聪明了，为什么我们还需要“ AI Agent 平台”？

产品交流 • 数栈君 发表了文章 • 0 个评论 • 1010 次浏览 • 2025-05-27 15:14 • 来自相关话题

在过去一年中，大模型能力不断跃升，AI应用层一度呈现“百花齐放”的局面。但当热潮褪去，产业界出现了一个更值得关注的现象：越来越多企业，特别是技术中台能力较强的大厂，开始“偷偷地”将注意力转向了AI Agent平台的建设。这不是一场突然兴起的技术热潮，而是AI系... ...查看全部

Dinky 扩展批流统一数据集成框架 ChunJun 的实践分享

ChunJun • 数栈君 发表了文章 • 0 个评论 • 3217 次浏览 • 2022-11-18 15:36 • 来自相关话题

一、前言ChunJun（原 FlinkX）是一个基于 Flink 提供易用、稳定、高效的批流统一的数据集成工具，既可以采集静态的数据，比如 MySQL，HDFS 等，也可以采集实时变化的数据，比如 binlog，Kafka 等。同时 ChunJun 也是一个支... ...查看全部

一文读懂什么是Hadoop？

技术共享 • 花袋鼠 发表了文章 • 0 个评论 • 3482 次浏览 • 2021-11-04 11:34 • 来自相关话题

01引言2011年的时候我们在百度搜索Hadoop相关的问题每天只有零星几个，2015年再去百度搜索Hadoop已经有800多万个问题，而如今已然已经过亿了，Hadoop已成为大数据必备的基础设施了。Hadoop被公认是一套行业大数据标准开源软件，在分布式环境... ...查看全部
没有更多了...

各位大佬，我现在在尝试通过kubernetes-session方式运行chunjun syncjob 任务。现在遇到的问题是当任务提交到session集群是报jar missing错误

回复

ChunJun • 群内解答 回复了问题 • 1 人关注 • 3 个回复 • 1748 次浏览 • 2023-05-26 10:43 • 来自相关话题

大佬们，chunjun，yan-prejob 启动时 会报空，这是什么原因呢

回复

ChunJun • 匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 1841 次浏览 • 2023-05-26 10:41 • 来自相关话题

有没有大佬遇到过 把chunjun-dist 放到 flink lib里面创建 iceberg的连接器失败，去掉就可以创建 ，版本1.16

回复

ChunJun • 匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 1799 次浏览 • 2023-05-26 10:41 • 来自相关话题

问下大家 flink在提交任务后，在源端数据库会有一个进程

回复

ChunJun • 匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 1359 次浏览 • 2023-05-26 10:40 • 来自相关话题

我修改了flink-json的源代码暂时绕过去了

回复

ChunJun • 群内解答 回复了问题 • 1 人关注 • 2 个回复 • 1571 次浏览 • 2023-05-26 10:40 • 来自相关话题

请教各位大佬一个问题哈，目前chunjun支持postgresql数据库11版本备库实时数据同步吗？

回复

ChunJun • 匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 1626 次浏览 • 2023-05-26 10:38 • 来自相关话题

啥时候能把flink cdc的版本提升呀

回复

ChunJun • 群内解答 回复了问题 • 1 人关注 • 2 个回复 • 1373 次浏览 • 2023-05-26 10:29 • 来自相关话题

1.13 和1.16的 json包结构发生了变化；mapper对象修改了不在构造方法中创建了；

回复

ChunJun • 群内解答 回复了问题 • 1 人关注 • 1 个回复 • 1879 次浏览 • 2023-05-26 10:28 • 来自相关话题

有大佬遇到过这个问题吗？使用docker镜像进行ES数据同步，

回复

ChunJun • 匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 1480 次浏览 • 2023-05-26 10:27 • 来自相关话题

咱们使用mysql当做sink时，有一个D的删除操作，生成的语句为什么是根据所有字段删除的，不是根据主键删除，而且为什么如果是null的时候是= null而不是is null，导致删除失败了

回复

ChunJun • 匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 1576 次浏览 • 2023-05-26 10:24 • 来自相关话题

没有更多了...

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 137 次浏览 • 2026-03-30 12:24 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在企业级大数据平台中，Hadoop YARN 作为资源调度与任务管理的核心组件，承担着海量批处理、流式计算和机器学习任务的调度职责。当任务在集群中失败、性能异常或逻辑错误时，仅依赖日志文件进行排查往往效率低... ...查看全部

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 175 次浏览 • 2026-03-29 20:54 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在企业级大数据平台中，Hadoop YARN 作为资源调度与任务管理的核心组件，承担着海量批处理、流式计算和机器学习任务的调度职责。当任务在生产集群中失败、性能异常或逻辑错误时，仅靠日志分析往往难以定位根本... ...查看全部

远程调试Hadoop集群YARN与MapReduce方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 147 次浏览 • 2026-03-29 20:32 • 来自相关话题

远程调试 Hadoop 集群 YARN 与 MapReduce 方法 🛠️在现代数据中台架构中，Hadoop 生态系统依然是支撑大规模批处理任务的核心引擎。YARN（Yet Another Resource Negotiator）负责资源调度，MapReduc... ...查看全部

远程调试Hadoop集群JVM调试方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 166 次浏览 • 2026-03-29 19:21 • 来自相关话题

远程调试 Hadoop 集群 JVM 是大数据平台运维与开发中的一项关键技能，尤其在数据中台架构日益复杂的今天，当 MapReduce 任务、Spark 应用或 YARN 容器出现性能瓶颈、内存溢出或逻辑异常时，仅靠日志分析往往难以定位根本原因。此时，启用 J... ...查看全部

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 147 次浏览 • 2026-03-29 18:23 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统依然是处理海量批处理任务的核心引擎。YARN（Yet Another Resource Negotiator）作为 Hadoop 2.x 之后的资源调度框架，... ...查看全部

远程调试Hadoop集群YARN任务方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 143 次浏览 • 2026-03-29 16:51 • 来自相关话题

远程调试 Hadoop 集群 YARN 任务方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统依然是处理海量离线计算任务的核心引擎。YARN（Yet Another Resource Negotiator）作为 Hadoop 2.x 之后的资源调度框架... ...查看全部

远程调试Hadoop集群YARN与MapReduce方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 149 次浏览 • 2026-03-29 13:45 • 来自相关话题

远程调试 Hadoop 集群 YARN 与 MapReduce 方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统仍是处理海量离线数据的核心引擎。尤其在构建数字孪生、日志分析、批处理报表等场景中，MapReduce 作业的稳定性与性能直接影响业务决策的... ...查看全部

远程调试Hadoop集群JVM参数配置方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 167 次浏览 • 2026-03-29 13:16 • 来自相关话题

远程调试 Hadoop 集群 JVM 参数配置方法 🛠️在构建企业级数据中台、实现数字孪生系统或部署大规模数据可视化平台时，Hadoop 集群作为底层数据处理引擎，其稳定性与性能直接影响整个系统的可靠性。当集群出现任务失败、内存溢出、GC 频繁或响应延迟等异常... ...查看全部

远程调试Hadoop集群YARN与MapReduce方法

知识百科 • 数栈君 发表了文章 • 0 个评论 • 151 次浏览 • 2026-03-29 10:55 • 来自相关话题

远程调试 Hadoop 集群 YARN 与 MapReduce 方法 🛠️在现代企业数据中台架构中，Hadoop 生态系统仍是处理海量离线批处理任务的核心引擎。尤其在构建数字孪生、日志分析、用户行为建模等场景时，MapReduce 作业的稳定性与性能直接影响数... ...查看全部

Hadoop存算分离架构与HDFS+S3实现方案

知识百科 • 数栈君 发表了文章 • 0 个评论 • 117 次浏览 • 2026-03-29 09:55 • 来自相关话题

Hadoop存算分离架构与HDFS+S3实现方案在数据中台、数字孪生与数字可视化等现代数据架构中，计算与存储的解耦已成为提升系统弹性、降低成本、增强扩展性的核心趋势。Hadoop存算分离方案正是这一趋势下的关键实践路径。传统Hadoop集群将计算（MapRed... ...查看全部
没有更多了...
热门产品
数雁EasyDigit 数栈DTinsight 数驹DTengine 易知微EasyV
解决方案
政务解决方案 港口解决方案 基金解决方案 制造解决方案 保险解决方案 高校解决方案 证券解决方案 文旅解决方案 银行解决方案 大宗商品解决方案
快速入口
合作与生态 开源社区 Github
联系我们

合作咨询 market@dtstack.com

联系电话 400-002-1024

总部地址 杭州市余杭区五常街道阿里巴巴数字生态创新园4号楼袋鼠云

袋鼠云官方订阅号
袋鼠云官方订阅号
热门搜索：
数据中台 企业数据中台 金融数据中台 离线数据中台 数据中台公司 一站式数据中台 数据中台开发 一站式数据开发 数据中台解决方案 大数据分析 数据分析平台 新基建 大数据开发 大数据开发平台 数据化转型解决方案 信创 数据可视化 数字孪生 可视化大屏 数字化转型

友情链接： 易知微 云掣

@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号