湖仓一体（Lakehouse）出现之前，数据仓库和数据湖堪称数据领域的两大“顶流”。打个比方，要是把数据仓库比作一座大型图书馆，那其中的数据就如同馆内藏书，需要按照规范放好，借阅者只需依照类别索引，便能精准找到想要的信息。反观数据湖，更像是一个大型仓库，海纳百...
数栈君 发表于2024-12-05 17:06
291
0
事务RabbitMQ是基于AMQP协议实现的,该协议实现了事务机制,因此RabbitMQ也支持事务机制.SpringAMQP也提供了对事务相关的操作.RabbitMQ事务允许开发者确保消息的发送和接收是原子性的,要么全部成功,要么全部失败.何为原子性（面试重点...
蓝袋鼠 发表于2024-12-05 17:03
311
0
一.TTLTTL(TimetoLive,过期时间),即过期时间.RabbitMQ可以对消息和队列设置TTL.它代表消息的存活时间。当一条消息被发送到 RabbitMQ 队列后，TTL 可以限制消息在队列中能够存活的最长时间。一旦消息在队列中的存活时间超过了 T...
蓝袋鼠 发表于2024-12-05 16:45
333
0
前言：前期讲了RabbitMQ的概念和应⽤,RabbitMQ实现了AMQP0-9-1规范的许多扩展,在RabbitMQ官⽹上,也给⼤家介绍了RabbitMQ的⼀些特性,我们挑⼀些重要的且常⽤的给⼤家讲⼀下Rabbitmq官网一.消息确认机制 ⽣产者发送消息之后...
蓝袋鼠 发表于2024-12-04 17:47
234
0
五 Yarn的命令yarn top 类似于Linux的top命令，查看正在运行的程序资源占用情况。yarn queue -status root.default查看指定队列使用情况，下文会讲解任务队列yarn application-list#通过任务的状态...
数栈君 发表于2024-12-04 14:27
513
0
搭建好hadoop的分布式文件系统(HDFS), 在HDFS上存储数据，将数据进行切块，分布在不同的数据节点进行存储。这些解决了存储问题，下面开始来解决将这些节点上存储的数据文件来做计算。谷歌发表的一篇论文《GFS》，Nutch团队对这个论文使用Java进行了...
数栈君 发表于2024-12-04 14:02
231
0
前言：经过上面俩章学习，我们已经知道Rabbit的使用方式RabbitMQ 七种工作模式介绍_rabbitmq 工作模式-CSDN博客RabbitMQ的工作队列在Spring Boot中实现（详解常⽤的⼯作模式）-CSDN博客作为⼀个消息队列,RabbitMQ...
蓝袋鼠 发表于2024-12-03 17:52
195
0
上文着重介绍RabbitMQ 七种工作模式介绍RabbitMQ 七种工作模式介绍_rabbitmq 工作模式-CSDN博客本篇讲解如何在Spring环境下进⾏RabbitMQ的开发.（只演⽰部分常⽤的⼯作模式）引⼊依赖 在pom.xml 可以导入依赖<!...
蓝袋鼠 发表于2024-12-03 17:31
218
0
1 yarn资源调度器 Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。1.1 Yarn基础架构 YARN主要由Res...
数栈君 发表于2024-12-03 17:08
370
0
YARN 简介YARN 是Yet Another Resource Negotiator的缩写。YARN是第二代MapReduce,即MRv2,是在第一代MapReduce基础上演变而来的,主要是为了解决原始Hadoop扩展性较差,不支持多计算框架而提出的;通...
数栈君 发表于2024-12-03 17:00
288
0
@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号
