Broadcast
大模型训练中的分布式优化策略与实现方法
知识百科 • 数栈君 发表了文章 • 0 个评论 • 196 次浏览 • 2025-12-29 11:19
随着人工智能技术的快速发展，大模型（Large Language Models, LLMs）在自然语言处理、计算机视觉、语音识别等领域展现出强大的潜力。然而，大模型的训练过程通常需要处理海量数据和复杂的计算任务，这对计算资源提出了极高的要求。为了提高训练效率和... ...查看全部
AI大模型一体机的分布式训练技术解析
知识百科 • 数栈君 发表了文章 • 0 个评论 • 217 次浏览 • 2025-10-20 17:33
随着人工智能技术的快速发展，AI大模型在各个领域的应用越来越广泛。然而，训练一个大规模的AI模型需要处理海量的数据和复杂的计算任务，这对计算资源和算法效率提出了极高的要求。为了应对这些挑战，分布式训练技术应运而生，并成为AI大模型训练的核心技术之一。本文将深入... ...查看全部
Flink多流处理之Broadcast(广播变量)
网友分享 • 数栈君 发表了文章 • 0 个评论 • 2408 次浏览 • 2023-09-14 10:48
写过Spark批处理的应该都知道,有一个广播变量broadcast这样的一个算子,可以优化我们计算的过程,有效的提高效率;同样在Flink中也有broadcast,简单来说和Spark中的类似,但是有所区别,首先Spark中的broadcast是静态的数据,而... ...查看全部
大模型训练中的分布式优化策略与实现方法
知识百科 • 数栈君 发表了文章 • 0 个评论 • 196 次浏览 • 2025-12-29 11:19
随着人工智能技术的快速发展，大模型（Large Language Models, LLMs）在自然语言处理、计算机视觉、语音识别等领域展现出强大的潜力。然而，大模型的训练过程通常需要处理海量数据和复杂的计算任务，这对计算资源提出了极高的要求。为了提高训练效率和... ...查看全部
AI大模型一体机的分布式训练技术解析
知识百科 • 数栈君 发表了文章 • 0 个评论 • 217 次浏览 • 2025-10-20 17:33
随着人工智能技术的快速发展，AI大模型在各个领域的应用越来越广泛。然而，训练一个大规模的AI模型需要处理海量的数据和复杂的计算任务，这对计算资源和算法效率提出了极高的要求。为了应对这些挑战，分布式训练技术应运而生，并成为AI大模型训练的核心技术之一。本文将深入... ...查看全部
Flink多流处理之Broadcast(广播变量)
网友分享 • 数栈君 发表了文章 • 0 个评论 • 2408 次浏览 • 2023-09-14 10:48
写过Spark批处理的应该都知道,有一个广播变量broadcast这样的一个算子,可以优化我们计算的过程,有效的提高效率;同样在Flink中也有broadcast,简单来说和Spark中的类似,但是有所区别,首先Spark中的broadcast是静态的数据,而... ...查看全部
