1、背景在 Kubernetes 中，调度 (scheduling) 指的是确保 Pod 匹配到合适的节点，以便 kubelet 能够运行它们。调度的工作由调度器和控制器协调完成。调度器通过 Kubernetes 的监测（Watch）机制来发现集群中新创建且尚...
数栈君 发表于2024-03-08 09:56
128
0
MergeTree是Clickhouse中最核心的存储引擎。上一篇文章中，我们介绍了MergeTree的基本结构。1、MergeTree由分区（partiton）和part组成。2、Part是MergeTree可操作的基本数据单元。Insert数据时，会生成新...
数栈君 发表于2024-03-08 09:52
173
0
1 集群准备1.1 安装Hadoop,HiveImpala的安装需要提前装好Hadoop，Hive这两个框架，hive需要在所有的Impala安装的节点上⾯都要有，因为Impala需要引⽤Hive的依赖包，hadoop的框架需要⽀持C程序访问接⼝，查看下图，如...
数栈君 发表于2024-03-07 11:05
143
0
随着大数据技术的演进和信息安全性需求的提升，数据规模的持续扩张为数据运维工作带来了严峻考验。面对海量数据所形成的繁重管理压力，运维人员面临效率瓶颈，而不断攀升的人力成本也使得单纯依赖扩充运维团队来解决问题变得不再实际可行。由此可见，智能化与高效便捷是运维发展的...
数栈君 发表于2024-03-07 10:31
171
0
第 1 节 Impala的负载均衡Impala主要有三个组件，分别是statestore，catalog和impalad，对于Impalad节点，每⼀个节点都可以接收客户端的查询请求，并且对于连接到该Impalad的查询还要作为Coordinator节点（需要...
数栈君 发表于2024-03-06 10:25
273
0
Impala的核⼼开发语⾔是sql语句，Impala有shell命令⾏窗⼝，以及JDBC等⽅式来接收sql语句执⾏，对于复杂类型分析可以使⽤C++或者Java来编写UDF函数。Impala的sql语法是⾼度集成了Apache Hive的sql语法，Impala...
数栈君 发表于2024-03-06 10:21
390
0
近两年， KUDU 在大数据平台的应用越来越广泛，在 阿里、小米、网易 等公司的大数据架构中，KUDU 都有着不可替代的地位。背景介绍在 Kudu之前，大数据主要以两种方式存储： 静态数据： 以 HDFS 引擎作为存储引擎，适用于 高吞吐量的离线大数据分析...
数栈君 发表于2024-03-05 11:03
189
0
金融业务产品授信准入、交易营销等环节存在广泛的风控诉求，随着业务种类增多，传统的专家规则、评分卡模型难以应付日趋复杂的风控场景。在传统风控以专家规则系统为主流应用的语境下，规则模型的入参习惯被称为“变量”。基于专家规则的风险评估，存在规则触发阈值难量化的特点，...
数栈君 发表于2024-03-05 10:52
177
0
SQLDMLDML (Data Manipulation Language):数据操作语言，用来对数据库中表的数据记录进行增删改操作。添加数据（INSRT）修改数据（UPDATE）删除数据（DELETE）DML-添加数据1.给指定字段添加数据INSERT IN...
数栈君 发表于2024-03-04 10:39
140
0
指标是什么？业务发展过程中，企业内外部都会产生很多的业务数据，对这些数据进行采集、计算、落库、分析后，形成的统计结果称为指标。简单来说，指标是业务被拆解、量化后形成的数量特征，企业利用数据指标对业务进行精准的号脉，实现对业务的科学管理和有效优化。在我们对多家企...
数栈君 发表于2024-03-04 10:30
182
0
@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号
