性能调优

性能调优

大数据大厂之 Hadoop MapReduce 优化指南:释放数据潜能,引领科技浪潮

知识百科数栈君 发表了文章 • 0 个评论 • 166 次浏览 • 2024-10-16 11:43 • 来自相关话题

一、Hadoop MapReduce 基础原理1.1 MapReduce 编程模型概述Hadoop MapReduce 构建于分布式存储系统之上,其核心设计理念是处理大规模数据集。它的编程模型灵感来源于函数式编程中的 map 和 reduce 原语。在 Map... ...查看全部

Hive优化之监控

技术共享沸羊羊 发表了文章 • 0 个评论 • 740 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身... ...查看全部

Hive优化之Spark执行引擎的参数优化

技术共享沸羊羊 发表了文章 • 0 个评论 • 682 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hiv... ...查看全部

大数据大厂之 Hadoop MapReduce 优化指南:释放数据潜能,引领科技浪潮

知识百科数栈君 发表了文章 • 0 个评论 • 166 次浏览 • 2024-10-16 11:43 • 来自相关话题

一、Hadoop MapReduce 基础原理1.1 MapReduce 编程模型概述Hadoop MapReduce 构建于分布式存储系统之上,其核心设计理念是处理大规模数据集。它的编程模型灵感来源于函数式编程中的 map 和 reduce 原语。在 Map... ...查看全部

Hive优化之监控

技术共享沸羊羊 发表了文章 • 0 个评论 • 740 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身... ...查看全部

Hive优化之Spark执行引擎的参数优化

技术共享沸羊羊 发表了文章 • 0 个评论 • 682 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hiv... ...查看全部