大数据活动

大数据活动

MapReduce基础入门7

网友分享数栈君 发表了文章 • 0 个评论 • 110 次浏览 • 2023-07-07 11:16 • 来自相关话题

1、MapReduce会将一个大的计算任务进行拆分,拆分成小任务,让这些小任务在不同的计算机中进行处理,最后再将这些小任务的结果记性整体汇总2、MapReduce分为两个阶段,一个Map阶段负责任务的拆分,一个是Reduce阶段,负责任务的汇总3、整个MapR... ...查看全部

Hive的表操作8

网友分享数栈君 发表了文章 • 0 个评论 • 111 次浏览 • 2023-07-07 11:11 • 来自相关话题

一、Hive的优化1.key值问题-空KEY过滤有时join超时是因为某些key对应的数据太多,而相同key对应的数据都会发送到相同的reducer上,从而导致内存不够。此时我们应该仔细分析这些异常的key,很多情况下,这些key对应的数据是异常数据,我们需要... ...查看全部

大数据Doris(五十七):RECOVER数据删除恢复

网友分享数栈君 发表了文章 • 0 个评论 • 238 次浏览 • 2023-07-06 11:51 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

命令消费kafka报错(id: -1 rack: null) disconnected

网友分享数栈君 发表了文章 • 0 个评论 • 349 次浏览 • 2023-07-06 11:50 • 来自相关话题

CDP 717环境使用kafka-console-consumer 命令消费kafka报错如下23/03/28 09:19:07 WARN clients.NetworkClient: [Consumer clientId=consumer-console-c... ...查看全部

农业病虫害数据集与算法——调研整理

网友分享数栈君 发表了文章 • 0 个评论 • 405 次浏览 • 2023-07-06 11:50 • 来自相关话题

农业病虫害研究图库陈雷;袁媛.农业病虫害研究图库.(V1).中国科学院合肥物质科学研究院[创建机构],2021-10-27.国家基础学科公共科学数据中心[发布机构],CSTR:16666.11.nbsdc.feoakuia;http://resolve.pid... ...查看全部

springboot+mybatis+echarts +mysql制作数据可视化大屏

知识百科数栈君 发表了文章 • 0 个评论 • 188 次浏览 • 2023-07-05 14:12 • 来自相关话题

随着大数据时代的到来,数据可视化变得越来越重要。通过数据可视化大屏,我们可以直观地看到数据的整体情况,更好地理解数据背后的信息。本文将介绍如何使用SpringBoot、MyBatis、Echarts和MySQL制作数据可视化大屏。 技术选型 首先,我们需要选择... ...查看全部

中国大数据产业发展总体态势阐述

网友分享数栈君 发表了文章 • 0 个评论 • 173 次浏览 • 2023-04-21 13:43 • 来自相关话题

01大数据发展总体态势2022年,全球大数据技术产业与应用创新不断迈向新高度。宏观看,国际方面,美欧、韩日、澳洲通过政策、法案、设立机构等形式,持续深化实施自身大数据战略。国内方面,党中央、国务院再次做出一系列重要部署,我国大数据领域良好的发展态势进一步巩固。... ...查看全部

DTALK直播预约 | 12月8日开播:后疫情时代,制造企业如何实现数字化转型?

活动动态数栈君 发表了文章 • 0 个评论 • 207 次浏览 • 2022-12-01 17:04 • 来自相关话题

我国制造业拥有31个大类、179个中类和609个小类,是全球产业门类最齐全、产业体系最完整的制造业。二十大报告中强调:“坚持把发展经济的着力点放在实体经济上”“推动制造业高端化、智能化、绿色化发展”。这为中国制造迈向高质量发展指明了方向。 疫情发生以来,制造业... ...查看全部

MapReduce基础入门7

网友分享数栈君 发表了文章 • 0 个评论 • 110 次浏览 • 2023-07-07 11:16 • 来自相关话题

1、MapReduce会将一个大的计算任务进行拆分,拆分成小任务,让这些小任务在不同的计算机中进行处理,最后再将这些小任务的结果记性整体汇总2、MapReduce分为两个阶段,一个Map阶段负责任务的拆分,一个是Reduce阶段,负责任务的汇总3、整个MapR... ...查看全部

Hive的表操作8

网友分享数栈君 发表了文章 • 0 个评论 • 111 次浏览 • 2023-07-07 11:11 • 来自相关话题

一、Hive的优化1.key值问题-空KEY过滤有时join超时是因为某些key对应的数据太多,而相同key对应的数据都会发送到相同的reducer上,从而导致内存不够。此时我们应该仔细分析这些异常的key,很多情况下,这些key对应的数据是异常数据,我们需要... ...查看全部

大数据Doris(五十七):RECOVER数据删除恢复

网友分享数栈君 发表了文章 • 0 个评论 • 238 次浏览 • 2023-07-06 11:51 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

命令消费kafka报错(id: -1 rack: null) disconnected

网友分享数栈君 发表了文章 • 0 个评论 • 349 次浏览 • 2023-07-06 11:50 • 来自相关话题

CDP 717环境使用kafka-console-consumer 命令消费kafka报错如下23/03/28 09:19:07 WARN clients.NetworkClient: [Consumer clientId=consumer-console-c... ...查看全部

农业病虫害数据集与算法——调研整理

网友分享数栈君 发表了文章 • 0 个评论 • 405 次浏览 • 2023-07-06 11:50 • 来自相关话题

农业病虫害研究图库陈雷;袁媛.农业病虫害研究图库.(V1).中国科学院合肥物质科学研究院[创建机构],2021-10-27.国家基础学科公共科学数据中心[发布机构],CSTR:16666.11.nbsdc.feoakuia;http://resolve.pid... ...查看全部

springboot+mybatis+echarts +mysql制作数据可视化大屏

知识百科数栈君 发表了文章 • 0 个评论 • 188 次浏览 • 2023-07-05 14:12 • 来自相关话题

随着大数据时代的到来,数据可视化变得越来越重要。通过数据可视化大屏,我们可以直观地看到数据的整体情况,更好地理解数据背后的信息。本文将介绍如何使用SpringBoot、MyBatis、Echarts和MySQL制作数据可视化大屏。 技术选型 首先,我们需要选择... ...查看全部

中国大数据产业发展总体态势阐述

网友分享数栈君 发表了文章 • 0 个评论 • 173 次浏览 • 2023-04-21 13:43 • 来自相关话题

01大数据发展总体态势2022年,全球大数据技术产业与应用创新不断迈向新高度。宏观看,国际方面,美欧、韩日、澳洲通过政策、法案、设立机构等形式,持续深化实施自身大数据战略。国内方面,党中央、国务院再次做出一系列重要部署,我国大数据领域良好的发展态势进一步巩固。... ...查看全部

DTALK直播预约 | 12月8日开播:后疫情时代,制造企业如何实现数字化转型?

活动动态数栈君 发表了文章 • 0 个评论 • 207 次浏览 • 2022-12-01 17:04 • 来自相关话题

我国制造业拥有31个大类、179个中类和609个小类,是全球产业门类最齐全、产业体系最完整的制造业。二十大报告中强调:“坚持把发展经济的着力点放在实体经济上”“推动制造业高端化、智能化、绿色化发展”。这为中国制造迈向高质量发展指明了方向。 疫情发生以来,制造业... ...查看全部