大数据技术

大数据技术

大数据技术本质上解决的是5个核心问题

网友分享数栈君 发表了文章 • 0 个评论 • 237 次浏览 • 2023-07-26 10:42 • 来自相关话题

大数据诞生之前的数据处理模式大数据是什么?其实大数据是满足数据达到海量这个规模以后,对这部分数据要完成存储包括计算的一种技术。但在数据没有达到海量规模之前,我们是不是有传统的数据处理架构去帮我们完成这部分数据的一个处理?首先从数据类型来说,我们处理的有结构化的... ...查看全部

Hive SQL on Flink 构建流批一体引擎

网友分享数栈君 发表了文章 • 0 个评论 • 175 次浏览 • 2023-06-01 17:18 • 来自相关话题

01构建流批一体引擎的挑战目前,流和批仍然是相对割裂的。虽然我们在应用层统一了,但从接入层开始,不同的引擎依旧有不同的接入层、API 层、执行层。我们认为,统一的流批一体引擎应该是从接入层开始使用 SQL Gateway 作为接入层。在 API 层使用 Fli... ...查看全部

Hybrid Shuffle 测试分析和使用建议

网友分享数栈君 发表了文章 • 0 个评论 • 135 次浏览 • 2023-06-01 17:15 • 来自相关话题

Hybrid Shuffle 的优势分析相比于传统的批式 Shuffle, Hybrid Shuffle 主要具备以下优势:调度:Hybrid Shuffle 打破了 Pipelined Shuffle 所有 Task 必须同时调度,Blocking Shuf... ...查看全部

大数据技术的知识图谱

知识百科沸羊羊 发表了文章 • 0 个评论 • 114 次浏览 • 2023-05-15 11:40 • 来自相关话题

大数据技术的四大挑战与十大趋势

知识百科数栈君 发表了文章 • 0 个评论 • 113 次浏览 • 2023-05-05 15:35 • 来自相关话题

大数据平台技术场景

知识百科沸羊羊 发表了文章 • 0 个评论 • 86 次浏览 • 2023-04-11 10:10 • 来自相关话题

大数据安全审计平台

知识百科沸羊羊 发表了文章 • 0 个评论 • 82 次浏览 • 2023-04-07 13:41 • 来自相关话题

搭建公司大数据平台

知识百科沸羊羊 发表了文章 • 0 个评论 • 87 次浏览 • 2023-04-07 11:57 • 来自相关话题

大数据安全管理技术公司

知识百科沸羊羊 发表了文章 • 0 个评论 • 74 次浏览 • 2023-04-07 11:55 • 来自相关话题

大数据安全管理技术服务

知识百科沸羊羊 发表了文章 • 0 个评论 • 100 次浏览 • 2023-04-07 11:47 • 来自相关话题

从5分钟到60秒,袋鼠云数栈在热重启技术上的提效探索之路

技术共享数栈君 发表了文章 • 0 个评论 • 169 次浏览 • 2023-03-09 13:53 • 来自相关话题

更好地提高效率一直以来是袋鼠云数栈产品的主要目标之一。当前数栈客户的实时任务都是基于 Per-Job 模式运行的,客户在进行一些任务参数的修改之后,只能先取消当前任务,再选择 CheckPoint 恢复或者重新运行,整个过程需要3-5分钟,比较浪费时间。为了达... ...查看全部

前端资源静默刷新报错无解?不如用这个方案来避坑

技术共享数栈君 发表了文章 • 0 个评论 • 634 次浏览 • 2021-12-30 16:09 • 来自相关话题

导读:各位栈宝宝们,在进行前端资源静默刷新时候,是不是经常出了问题找不到原因?即使找到是缓存的问题,也不知在不依赖赖后端服务,也不使用 WebSocket / Event-Source下如何完美解决?不要头秃?‍?,轻量级解决方案这就送到!你可以收获???▫ ... ...查看全部

大佬们 flink 集群模式下 只能用hdfs来存储Savepoint吗

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 219 次浏览 • 2023-03-09 14:53 • 来自相关话题

麻烦问下这个参数对所有的连接器都支持吗 即所有连接器都支持batch和stream两种同步方式吗

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 163 次浏览 • 2023-03-09 14:51 • 来自相关话题

大数据技术本质上解决的是5个核心问题

网友分享数栈君 发表了文章 • 0 个评论 • 237 次浏览 • 2023-07-26 10:42 • 来自相关话题

大数据诞生之前的数据处理模式大数据是什么?其实大数据是满足数据达到海量这个规模以后,对这部分数据要完成存储包括计算的一种技术。但在数据没有达到海量规模之前,我们是不是有传统的数据处理架构去帮我们完成这部分数据的一个处理?首先从数据类型来说,我们处理的有结构化的... ...查看全部

Hive SQL on Flink 构建流批一体引擎

网友分享数栈君 发表了文章 • 0 个评论 • 175 次浏览 • 2023-06-01 17:18 • 来自相关话题

01构建流批一体引擎的挑战目前,流和批仍然是相对割裂的。虽然我们在应用层统一了,但从接入层开始,不同的引擎依旧有不同的接入层、API 层、执行层。我们认为,统一的流批一体引擎应该是从接入层开始使用 SQL Gateway 作为接入层。在 API 层使用 Fli... ...查看全部

Hybrid Shuffle 测试分析和使用建议

网友分享数栈君 发表了文章 • 0 个评论 • 135 次浏览 • 2023-06-01 17:15 • 来自相关话题

Hybrid Shuffle 的优势分析相比于传统的批式 Shuffle, Hybrid Shuffle 主要具备以下优势:调度:Hybrid Shuffle 打破了 Pipelined Shuffle 所有 Task 必须同时调度,Blocking Shuf... ...查看全部

大数据技术的知识图谱

知识百科沸羊羊 发表了文章 • 0 个评论 • 114 次浏览 • 2023-05-15 11:40 • 来自相关话题

大数据技术的四大挑战与十大趋势

知识百科数栈君 发表了文章 • 0 个评论 • 113 次浏览 • 2023-05-05 15:35 • 来自相关话题

大数据平台技术场景

知识百科沸羊羊 发表了文章 • 0 个评论 • 86 次浏览 • 2023-04-11 10:10 • 来自相关话题

大数据安全审计平台

知识百科沸羊羊 发表了文章 • 0 个评论 • 82 次浏览 • 2023-04-07 13:41 • 来自相关话题

搭建公司大数据平台

知识百科沸羊羊 发表了文章 • 0 个评论 • 87 次浏览 • 2023-04-07 11:57 • 来自相关话题

大数据安全管理技术公司

知识百科沸羊羊 发表了文章 • 0 个评论 • 74 次浏览 • 2023-04-07 11:55 • 来自相关话题

大数据安全管理技术服务

知识百科沸羊羊 发表了文章 • 0 个评论 • 100 次浏览 • 2023-04-07 11:47 • 来自相关话题