前言Hadoop作为一种强大的大数据处理框架，有多种运行模式，每种模式都适用于不同的使用场景。本文将介绍Hadoop的三种常见运行模式：单机模式、伪分布式模式和完全分布式模式。一、 单机模式单机模式是Hadoop最简单的运行模式。在单机模式下，所有Hadoop...
数栈君 发表于2024-03-29 17:01
353
0
企业搭建完善、全面的指标体系是企业用数据指导业务经营决策的第一步。但是做完指标之后，对指标的监控，经常被大家忽视。当指标发生了异常波动（上升或下降），需要企业能够及时发现，并快速找到背后真实的原因，才能针对性地制定相应策略，否则就是盲打，原地打转。指标异常波动...
数栈君 发表于2024-03-28 10:12
454
0
在金融行业数字化转型背景下，银行等金融机构面临着业务模式创新与数据应用的深度融合。业务上所需要的不再是单纯的数据，而是数据背后映射的业务趋势洞察，只有和业务相结合转化为业务度量指标，经过数据分析处理呈现为报表进行展示，才能真正体现它们的价值。但在需求转化为指标...
数栈君 发表于2024-03-28 10:10
232
0
RabbitMQ（基础篇）同步和异步RabbitMQ是高性能的异步通讯组件微服务一旦拆分，必然涉及到服务之间的相互调用，目前我们服务之间调用采用的都是基于OpenFeign的调用。这种调用中，调用者发起请求后需要等待服务提供者执行业务返回结果后，才能继续执行后...
数栈君 发表于2024-03-27 11:13
183
0
一、概念 延时队列， 队列内部是有序的，最重要的特性就体现在它的延时属性上，延时队列中的元素是希望在指定时间到了以后或之前取出和处理，简单来说，延时队列就是用来存放需要在指定时间被处理的元素的队列。二、使用场景订单在十分钟之内未支付则自动取消新创...
数栈君 发表于2024-03-27 11:00
134
0
一、前言分隔符是hive在建表的时候要考虑的一个重要因素，根据要加载的原始数据的格式不同，通常数据文件中的分隔符也有差异，因此可以在建表的时候指定分隔符，从而映射到hive的数据表。二、hive默认分隔符规则以及限制Hive默认序列化类是LazySimpleS...
数栈君 发表于2024-03-26 10:38
599
0
为什么选择 Flink【1】流数据更真实地反映了我们的生活方式（实时聊天）；【2】传统的数据架构是基于有限数据集的（Spark 是基于微批次数据处理）；【3】我们的目标：低延迟、高吞吐（分布式架构，可能会出现顺序上的混乱，比如统计1个小时内，可能在1小时的时候...
数栈君 发表于2024-03-26 10:32
122
0
服务端安装服务端软件如下，会自动在系统内创建一个系统用户，用户名为：xxx ，密码为：xxx查看系统用户，会发现自动创建了如下用户：修改配置文件：rsyncd.confuse chroot = falsestrict modes = falsehosts a...
数栈君 发表于2024-03-25 15:59
131
0
问题现象：已知在B集群中采用helm方式部署了一个高可用版本的rancher，该rancher中已经配置导入了三套集群，并且三套集群状态在rancher控制台处均显示正常，日常可借助该rancher管控这三套集群。现在公司内另外又新部署了一套k8s集群，假定名...
数栈君 发表于2024-03-25 11:59
142
0
背景线下自建harbor需要迁移至云上自建harbor迁移方案harbor私有仓库的主从复制实现数据迁移前置条件harbor目标仓库已部署好，并且版本和源仓库版本最好保持一致迁移步骤1、配置slave仓库连接信息harbor master仓库配置，将slave...
数栈君 发表于2024-03-21 17:59
191
0
@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号
