20道常见的kafka面试题以及答案

1、kafka的消费者是pull(拉)还是push(推)模式,这种模式有什么好处?Kafka 遵循了一种大部分消息系统共同的传统的设计:producer 将消息推送到 broker,consumer 从broker 拉取消息。优点:pull模式消费者自主决定是...

   数栈君  发表于2023-06-06 11:14  378  0

内网穿透实现在外远程连接RabbitMQ服务

RabbitMQ是一个在 AMQP(高级消息队列协议)基础上完成的,可复用的企业消息系统,是当前最主流的消息中间件之一。由erlang开发的AMQP(Advanced Message Queue 高级消息队列协议 )的开源实现,由于erlang 语言的高并发特...

   数栈君  发表于2023-06-06 11:13  250  0

大数据 | Hadoop HA高可用搭建保姆级教程

集群准备🍟这是我们本次搭建要完成的集群规划,也就是我们的,终极目标(The ultimate goal)。2.1 集群规划也就是说,总共有hadoop102,hadoop103,hadoop104,hadoop105四个节点。先来一张搭建好的图证明一下我搭建好...

   数栈君  发表于2023-06-06 11:11  238  0

大数据Flink进阶(十五):Flink On Yarn任务提交

Flink的整个提交流程会涉及到组件有:客户端、JobManager、ResourceManager、Dispatcher、JobMaster、TaskManager这几个相关的组件。对于这几个组件的作用可以查看下篇Flink运行架构介绍,本篇将主要讲解Fli...

   数栈君  发表于2023-06-06 11:09  291  0

【大数据hive】hive视图与物化视图使用详解

一、hive中的视图使用过mysql视图的同学对视图的概念应该不陌生,视图就是一种虚拟表,可以临时存储查询的数据,hive中也提供了视图,hive中的视图具有下面的特点:Hive中的视图(view)是一种虚拟表,只保存定义,不实际存储数据;通常从真实的物理表查...

   数栈君  发表于2023-06-06 11:08  498  0

【Redis系列】Redis布隆过滤之8亿大数据集实战

1 问题描述接到一个优化场景:小程序用户的openid作为最主要的业务查询字段,在做了缓存设计之后仍有非常高频的查询,通过埋点简单统计约在每日1000w次。其中:由于有新增用户,新增矩阵小程序等原因导致请求的openid根本不存在MySQL数据库中,这部分统计...

   数栈君  发表于2023-06-06 10:58  393  0

Doris的数据模型

Apache Doris主要有3种数据模型:明细模型:Duplicate(重复,复制)模型,表中的Key值(类似关系模型中的主键)可以重复,和插入数据行一一对应。聚合模型:Aggregate(聚合,合计)模型,表中key值不重复,对于插入的数据数据按照key值...

   数栈君  发表于2023-06-05 11:36  380  0

Doris的关键性技术

Doris关键技术3.1 数据可靠性元数据使用 Memory+Checkpoint+Journal ( 分别是什么?),使用 BTBJE ( 类似于 Raft ) 协议实现高可用性和高可靠性。Doris 内部自行管理数据的多副本和自动修复。保证数据的高可用、高...

   数栈君  发表于2023-06-05 11:31  374  0

Doris的整体架构

概述Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Doris的分布式架构非常简洁,易于运维,并且可以支持10PB以上的超大数据集。Apache Doris可以满足多种数据...

   数栈君  发表于2023-06-05 11:31  271  0

Doris数据仓库总结

一、Doris简介Doris(原百度 Palo)是一款 基于大规模并行处理技术的分布式 SQL 数据库。/基于 MPP 的交互式SQL数据仓库,可用于 OLAP 。MPP 是将任务并行的分散到多个服务器和节点上,在每个节点上计算完成后,将各自部分的结果汇总在一...

   数栈君  发表于2023-06-05 11:31  463  0
1767条数据,每页显示10条
社区公告
  • 大数据领域最专业的产品&技术交流社区,专注于探讨与分享大数据领域有趣又火热的信息,专业又专注的数据人园地

最新活动更多
微信扫码获取数字化转型资料
钉钉扫码加入技术交流群