Hadoop

Hadoop存算分离架构中备份恢复策略制定

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 14 小时前 • 来自相关话题

Hadoop存算分离架构是一种将存储和计算资源分离的架构设计，旨在优化资源利用率、降低成本并提高系统的灵活性。在存算分离架构中，备份恢复策略的制定至关重要，因为它直接关系到数据的可靠性和业务的连续性。关键术语定义存算分离... ...查看全部

Hadoop存算分离方案中日志分析服务的集成与优化

知识百科 • 数栈君发表了文章 • 0 个评论 • 2 次浏览 • 14 小时前 • 来自相关话题

Hadoop存算分离方案是一种将存储和计算资源分开管理的架构设计，旨在优化资源利用率、降低硬件成本并提高系统的可扩展性。在大数据处理场景中，日志分析服务是不可或缺的一部分，它能够帮助企业监控系统运行状态、排查问题并优化性能。本文将深入探讨如何在Hadoop存算... ...查看全部

Hadoop存算分离架构中权限管理体系设计

知识百科 • 数栈君发表了文章 • 0 个评论 • 2 次浏览 • 14 小时前 • 来自相关话题

Hadoop存算分离架构是一种将存储和计算资源分开的架构设计，旨在提高资源利用率和灵活性。在存算分离架构中，权限管理体系的设计至关重要，因为它直接关系到数据的安全性和系统的稳定性。本文将深入探讨Hadoop存算分离方案中的权限管理体系设计，帮助企业和个人更好地... ...查看全部

Hadoop存算分离方案中数据血缘追踪系统搭建

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案是一种将存储和计算资源分离的架构设计，旨在优化资源利用率、降低硬件成本并提高系统的可扩展性。在这样的架构中，数据血缘追踪系统扮演着至关重要的角色，它能够帮助企业理解数据的来源、流转过程以及最终用途，从而提升数据治理能力。什么... ...查看全部

Hadoop存算分离架构中NoSQL数据库接入方案

知识百科 • 数栈君发表了文章 • 0 个评论 • 2 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离架构是一种将存储和计算资源解耦的设计模式，旨在优化资源利用率、降低硬件成本并提高系统的可扩展性。在大数据生态系统中，NoSQL数据库的接入方案是实现存算分离的重要组成部分。本文将深入探讨Hadoop存算分离架构中NoSQL数据库的接入方式及... ...查看全部

Hadoop存算分离方案中AI模型训练数据管道构建

知识百科 • 数栈君发表了文章 • 0 个评论 • 1 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案是一种将存储和计算资源分开管理的架构设计，旨在优化资源利用率、降低成本并提高系统的灵活性。在AI模型训练中，数据管道的构建是关键环节，它直接影响模型训练的效率和准确性。本文将深入探讨如何在Hadoop存算分离方案中构建高效的AI模型训练... ...查看全部

Hadoop存算分离架构中批处理效率优化方法

知识百科 • 数栈君发表了文章 • 0 个评论 • 1 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离架构是一种将存储和计算资源分开的架构设计，旨在提高资源利用率和灵活性。在大数据处理场景中，批处理效率优化是提升整体性能的关键。本文将深入探讨Hadoop存算分离方案中的批处理效率优化方法。 1. 存算分离架构概述存算分离架构通过... ...查看全部

Hadoop存算分离方案中流式计算集成的可行性分析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案是一种将存储和计算资源解耦的设计模式，旨在优化资源利用率、降低硬件成本并提高系统的可扩展性。在大数据生态系统中，流式计算作为实时数据处理的核心技术，其与Hadoop存算分离方案的集成可行性成为企业关注的重点。本文将深入探讨这一主题，并结... ...查看全部

Hadoop存算分离架构中异构数据源整合技术解析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离架构是一种将存储和计算分离的架构设计，旨在优化资源利用率和性能。在大数据处理场景中，异构数据源整合技术是实现高效数据管理和分析的关键。本文将深入探讨Hadoop存算分离方案中的异构数据源整合技术，帮助读者理解其核心原理和实际应用。 1. ... ...查看全部

Hadoop存算分离方案中数据湖仓一体化建设思路

知识百科 • 数栈君发表了文章 • 0 个评论 • 1 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案是大数据架构中的一项重要技术，它通过将存储和计算分离，显著提升了资源利用率和系统灵活性。在数据湖仓一体化建设中，Hadoop存算分离方案能够帮助企业更好地整合数据湖和数据仓库的功能，从而满足多样化的数据分析需求。在传统的Hadoop... ...查看全部

国产化方案如何破解数据迁移困局？

产品交流 • 数栈君发表了文章 • 0 个评论 • 82 次浏览 • 2025-05-27 15:24 • 来自相关话题

在当下，Cloudera CDH/HDP 停止更新，CDP 订阅成本急剧攀升，与此同时，金融、能源等行业的国产化政策加速落地。种种因素叠加，企业正面临着从传统大数据平台向国产化架构迁移的紧迫需求。本文将深度剖析大数据迁移过程中的四大核心挑战，并给出三大行之有效... ...查看全部

AI已经很聪明了，为什么我们还需要“ AI Agent 平台”？

产品交流 • 数栈君发表了文章 • 0 个评论 • 87 次浏览 • 2025-05-27 15:14 • 来自相关话题

在过去一年中，大模型能力不断跃升，AI应用层一度呈现“百花齐放”的局面。但当热潮褪去，产业界出现了一个更值得关注的现象：越来越多企业，特别是技术中台能力较强的大厂，开始“偷偷地”将注意力转向了AI Agent平台的建设。这不是一场突然兴起的技术热潮，而是AI系... ...查看全部

Dinky 扩展批流统一数据集成框架 ChunJun 的实践分享

ChunJun • 数栈君发表了文章 • 0 个评论 • 2157 次浏览 • 2022-11-18 15:36 • 来自相关话题

一、前言ChunJun（原 FlinkX）是一个基于 Flink 提供易用、稳定、高效的批流统一的数据集成工具，既可以采集静态的数据，比如 MySQL，HDFS 等，也可以采集实时变化的数据，比如 binlog，Kafka 等。同时 ChunJun 也是一个支... ...查看全部

一文读懂什么是Hadoop？

技术共享 • 花袋鼠发表了文章 • 0 个评论 • 1289 次浏览 • 2021-11-04 11:34 • 来自相关话题

01引言2011年的时候我们在百度搜索Hadoop相关的问题每天只有零星几个，2015年再去百度搜索Hadoop已经有800多万个问题，而如今已然已经过亿了，Hadoop已成为大数据必备的基础设施了。Hadoop被公认是一套行业大数据标准开源软件，在分布式环境... ...查看全部

各位大佬，我现在在尝试通过kubernetes-session方式运行chunjun syncjob 任务。现在遇到的问题是当任务提交到session集群是报jar missing错误

ChunJun • 群内解答回复了问题 • 1 人关注 • 3 个回复 • 809 次浏览 • 2023-05-26 10:43 • 来自相关话题

大佬们，chunjun，yan-prejob 启动时会报空，这是什么原因呢

ChunJun • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 768 次浏览 • 2023-05-26 10:41 • 来自相关话题

有没有大佬遇到过把chunjun-dist 放到 flink lib里面创建 iceberg的连接器失败，去掉就可以创建，版本1.16

ChunJun • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 754 次浏览 • 2023-05-26 10:41 • 来自相关话题

问下大家 flink在提交任务后，在源端数据库会有一个进程

ChunJun • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 665 次浏览 • 2023-05-26 10:40 • 来自相关话题

我修改了flink-json的源代码暂时绕过去了

ChunJun • 群内解答回复了问题 • 1 人关注 • 2 个回复 • 816 次浏览 • 2023-05-26 10:40 • 来自相关话题

请教各位大佬一个问题哈，目前chunjun支持postgresql数据库11版本备库实时数据同步吗？

ChunJun • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 737 次浏览 • 2023-05-26 10:38 • 来自相关话题

啥时候能把flink cdc的版本提升呀

ChunJun • 群内解答回复了问题 • 1 人关注 • 2 个回复 • 742 次浏览 • 2023-05-26 10:29 • 来自相关话题

1.13 和1.16的 json包结构发生了变化；mapper对象修改了不在构造方法中创建了；

ChunJun • 群内解答回复了问题 • 1 人关注 • 1 个回复 • 959 次浏览 • 2023-05-26 10:28 • 来自相关话题

有大佬遇到过这个问题吗？使用docker镜像进行ES数据同步，

ChunJun • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 638 次浏览 • 2023-05-26 10:27 • 来自相关话题

咱们使用mysql当做sink时，有一个D的删除操作，生成的语句为什么是根据所有字段删除的，不是根据主键删除，而且为什么如果是null的时候是= null而不是is null，导致删除失败了

ChunJun • 匿名用户发起了问题 • 1 人关注 • 0 个回复 • 704 次浏览 • 2023-05-26 10:24 • 来自相关话题

Hadoop存算分离架构中备份恢复策略制定

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 14 小时前 • 来自相关话题

Hadoop存算分离方案中日志分析服务的集成与优化

知识百科 • 数栈君发表了文章 • 0 个评论 • 2 次浏览 • 14 小时前 • 来自相关话题

Hadoop存算分离架构中权限管理体系设计

知识百科 • 数栈君发表了文章 • 0 个评论 • 2 次浏览 • 14 小时前 • 来自相关话题

Hadoop存算分离方案中数据血缘追踪系统搭建

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离架构中NoSQL数据库接入方案

知识百科 • 数栈君发表了文章 • 0 个评论 • 2 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案中AI模型训练数据管道构建

知识百科 • 数栈君发表了文章 • 0 个评论 • 1 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离架构中批处理效率优化方法

知识百科 • 数栈君发表了文章 • 0 个评论 • 1 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案中流式计算集成的可行性分析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离架构中异构数据源整合技术解析

知识百科 • 数栈君发表了文章 • 0 个评论 • 3 次浏览 • 15 小时前 • 来自相关话题

Hadoop存算分离方案中数据湖仓一体化建设思路

知识百科 • 数栈君发表了文章 • 0 个评论 • 1 次浏览 • 15 小时前 • 来自相关话题

更多...

Hadoop存算分离架构中备份恢复策略制定

Hadoop存算分离方案中日志分析服务的集成与优化

Hadoop存算分离架构中权限管理体系设计

Hadoop存算分离方案中数据血缘追踪系统搭建

Hadoop存算分离架构中NoSQL数据库接入方案

Hadoop存算分离方案中AI模型训练数据管道构建

Hadoop存算分离架构中批处理效率优化方法

Hadoop存算分离方案中流式计算集成的可行性分析

Hadoop存算分离架构中异构数据源整合技术解析

Hadoop存算分离方案中数据湖仓一体化建设思路

各位大佬，我现在在尝试通过kubernetes-session方式运行chunjun syncjob 任务。现在遇到的问题是当任务提交到session集群是报jar missing错误

大佬们，chunjun，yan-prejob 启动时会报空，这是什么原因呢

有没有大佬遇到过把chunjun-dist 放到 flink lib里面创建 iceberg的连接器失败，去掉就可以创建，版本1.16

问下大家 flink在提交任务后，在源端数据库会有一个进程

我修改了flink-json的源代码暂时绕过去了

请教各位大佬一个问题哈，目前chunjun支持postgresql数据库11版本备库实时数据同步吗？

啥时候能把flink cdc的版本提升呀

1.13 和1.16的 json包结构发生了变化；mapper对象修改了不在构造方法中创建了；

有大佬遇到过这个问题吗？使用docker镜像进行ES数据同步，

咱们使用mysql当做sink时，有一个D的删除操作，生成的语句为什么是根据所有字段删除的，不是根据主键删除，而且为什么如果是null的时候是= null而不是is null，导致删除失败了

Hadoop存算分离架构中备份恢复策略制定

Hadoop存算分离方案中日志分析服务的集成与优化

Hadoop存算分离架构中权限管理体系设计

Hadoop存算分离方案中数据血缘追踪系统搭建

Hadoop存算分离架构中NoSQL数据库接入方案

Hadoop存算分离方案中AI模型训练数据管道构建

Hadoop存算分离架构中批处理效率优化方法

Hadoop存算分离方案中流式计算集成的可行性分析

Hadoop存算分离架构中异构数据源整合技术解析

Hadoop存算分离方案中数据湖仓一体化建设思路

话题描述

相关话题

1 人关注该话题