任务运维

任务运维

Hive优化之监控

技术共享沸羊羊 发表了文章 • 0 个评论 • 577 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身... ...查看全部

Hive优化之Spark执行引擎的参数优化

技术共享沸羊羊 发表了文章 • 0 个评论 • 520 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hiv... ...查看全部

一站式运维管家 ChengYing 主机接入原理解析

ChengYing数栈君 发表了文章 • 0 个评论 • 413 次浏览 • 2023-07-07 10:40 • 来自相关话题

之前的文章中,我们已经为大家介绍了 ChengYing 的安装原理、产品包制作、产品线部署等内容,本篇将和大家介绍一个困扰许多开发者的内容——ChengYing 主机接入。帮助所有对 ChengYing 感兴趣的开发者更好地了解和使用一站式全自动化运维管家 C... ...查看全部

如何胜任大数据运维工程师?

网友分享数栈君 发表了文章 • 0 个评论 • 424 次浏览 • 2023-06-30 17:28 • 来自相关话题

01什么是大数据运维?首先,我先说一下整个软件的生命周期,大概会经历以下几个阶段:售前的阶段。这一块基本上就是甲方跟乙方两个进行洽谈,确认甲方需要什么东西,乙方做需求的确认,确认好需求之后,就由架构师根据需求来设计软件。要什么样的平台、什么样的组件、性能情况、... ...查看全部

浅谈大数据运维

网友分享数栈君 发表了文章 • 0 个评论 • 993 次浏览 • 2023-06-30 17:26 • 来自相关话题

01背景随着互联网的普及,人们几乎每天都在上网,因此上网产生的数据量也越来越大。数据作为一种新型资产,可从中挖取不少的价值。但面对超大规模、复杂类型的数据传统的数据库难以满足存储及处理的要求,需要借助大数据平台进行存储及处理。02大数据平台介绍大数据平台底层组... ...查看全部

大数据平台搭建运维

知识百科沸羊羊 发表了文章 • 0 个评论 • 672 次浏览 • 2023-06-06 11:40 • 来自相关话题

随着大数据技术的快速发展和广泛应用,越来越多企业开始构建自己的大数据平台。本文将介绍大数据平台搭建运维的关键步骤和最佳实践,帮助企业更好地实现大数据战略。首先,明确目标场景是大数据平台搭建的第一步。企业需要根据业务需求和数据特点来确定平台的功能和性能指标,以确... ...查看全部

SQL Server中 SMALLINT 范围是±32767 这里的转换器使用了Short.byteValue 导致大于127的值都是错误的~ 是有啥特殊原因吗?

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 1071 次浏览 • 2022-12-27 18:00 • 来自相关话题

Hive优化之监控

技术共享沸羊羊 发表了文章 • 0 个评论 • 577 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身... ...查看全部

Hive优化之Spark执行引擎的参数优化

技术共享沸羊羊 发表了文章 • 0 个评论 • 520 次浏览 • 2024-02-02 15:39 • 来自相关话题

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hiv... ...查看全部

一站式运维管家 ChengYing 主机接入原理解析

ChengYing数栈君 发表了文章 • 0 个评论 • 413 次浏览 • 2023-07-07 10:40 • 来自相关话题

之前的文章中,我们已经为大家介绍了 ChengYing 的安装原理、产品包制作、产品线部署等内容,本篇将和大家介绍一个困扰许多开发者的内容——ChengYing 主机接入。帮助所有对 ChengYing 感兴趣的开发者更好地了解和使用一站式全自动化运维管家 C... ...查看全部

如何胜任大数据运维工程师?

网友分享数栈君 发表了文章 • 0 个评论 • 424 次浏览 • 2023-06-30 17:28 • 来自相关话题

01什么是大数据运维?首先,我先说一下整个软件的生命周期,大概会经历以下几个阶段:售前的阶段。这一块基本上就是甲方跟乙方两个进行洽谈,确认甲方需要什么东西,乙方做需求的确认,确认好需求之后,就由架构师根据需求来设计软件。要什么样的平台、什么样的组件、性能情况、... ...查看全部

浅谈大数据运维

网友分享数栈君 发表了文章 • 0 个评论 • 993 次浏览 • 2023-06-30 17:26 • 来自相关话题

01背景随着互联网的普及,人们几乎每天都在上网,因此上网产生的数据量也越来越大。数据作为一种新型资产,可从中挖取不少的价值。但面对超大规模、复杂类型的数据传统的数据库难以满足存储及处理的要求,需要借助大数据平台进行存储及处理。02大数据平台介绍大数据平台底层组... ...查看全部

大数据平台搭建运维

知识百科沸羊羊 发表了文章 • 0 个评论 • 672 次浏览 • 2023-06-06 11:40 • 来自相关话题

随着大数据技术的快速发展和广泛应用,越来越多企业开始构建自己的大数据平台。本文将介绍大数据平台搭建运维的关键步骤和最佳实践,帮助企业更好地实现大数据战略。首先,明确目标场景是大数据平台搭建的第一步。企业需要根据业务需求和数据特点来确定平台的功能和性能指标,以确... ...查看全部