flink

flink

好代码是管出来的 ——.Net Core 集成测试与数据驱动测试

知识百科数栈君 发表了文章 • 0 个评论 • 37 次浏览 • 2023-11-17 11:59 • 来自相关话题

软件的单元测试关注是的软件最小可执行单元是否能够正常执行,但是软件是由一个个最小执行单元组成的集合体,单元与单元之间存在着种种依赖或联系,所以在软件开发时仅仅确保最小单元的正确往往是不够的,为了保证软件能够正确运行,单元与单元之间的集成测试是非常必要。  另外... ...查看全部

伴鱼基于 Flink 构建数据集成平台的设计与实现

网友分享数栈君 发表了文章 • 0 个评论 • 29 次浏览 • 2023-11-17 11:57 • 来自相关话题

数据仓库有四个基本的特征:面向主题的、集成的、相对稳定的、反映历史变化的。其中数据集成是数据仓库构建的首要前提,指将多个分散的、异构的数据源整合在一起以便于后续的数据分析。将数据集成过程平台化,将极大提升数据开发人员的效率。本文主要内容为: 数据集成 VS... ...查看全部

基于 SeaTunnel 构建 CDC 流式应用7 CDC提高触摸控制精度和可靠性

知识百科数栈君 发表了文章 • 0 个评论 • 17 次浏览 • 2023-11-15 11:34 • 来自相关话题

CClientDC CDC CPaintDC CWindowDC 的区别

知识百科数栈君 发表了文章 • 0 个评论 • 17 次浏览 • 2023-11-15 11:33 • 来自相关话题

基于 Flink CDC 的现代数据栈实践

知识百科数栈君 发表了文章 • 0 个评论 • 19 次浏览 • 2023-11-15 11:32 • 来自相关话题

Flink CDC+Kafka 加速业务实时化

知识百科数栈君 发表了文章 • 0 个评论 • 16 次浏览 • 2023-11-15 11:32 • 来自相关话题

Spark 在YARN上运行

网友分享数栈君 发表了文章 • 0 个评论 • 24 次浏览 • 2023-11-15 10:48 • 来自相关话题

在YARN上运行Spark 安全在YARN上启动Spark 添加其他JAR准备工作组态调试您的应用程序 Spark特性重要笔记的Kerberos YARN特定的Kerberos配置Kerberos故障排除配置外部随机播放服务使用Apache... ...查看全部

Flink实时读取Kafka数据写入Clickhouse并实时展示

知识百科数栈君 发表了文章 • 0 个评论 • 22 次浏览 • 2023-11-13 14:08 • 来自相关话题

基于实时计算Flink版的场景解决方案demo

知识百科数栈君 发表了文章 • 0 个评论 • 18 次浏览 • 2023-11-13 14:07 • 来自相关话题

flink实战-模拟简易双11实时统计大屏

知识百科数栈君 发表了文章 • 0 个评论 • 37 次浏览 • 2023-11-13 14:06 • 来自相关话题

背景 在大数据的实时处理中,实时的大屏展示已经成了一个很重要的展示项,比如最有名的双十一大屏实时销售总价展示。除了这个,还有一些其他场景的应用,比如我们在我们的后台系统实时的展示我们网站当前的pv、uv等等,其实做法都是类似的。 今天我们就做一个最简单的模... ...查看全部

“数据驱动”时代,企业为什么需要实时湖仓?

产品交流数栈君 发表了文章 • 0 个评论 • 274 次浏览 • 2023-09-05 17:42 • 来自相关话题

当谈到数据湖的时候,大家都在说,可以把所有数据(结构化/半结构化/非结构化)一股脑都丢进去,进行统一的元数据管理。然后上层计算对接,进行流批计算/OLAP 分析/算法分析。这个没问题,数据湖确实能承接底层的这部分能力,但是同时出现的问题也是不容忽视的。本文将关... ...查看全部

倒带ChunJun,同心前行|2022年度回顾&2023年共建规划

ChunJun数栈君 发表了文章 • 0 个评论 • 297 次浏览 • 2023-02-15 10:27 • 来自相关话题

ChunJun是一个开始于2018年的批流一体数据集成框架项目,原名FlinkX。2022年2月22日,在FlinkX进行初版开源的整整四年后,技术团队决定对FlinkX进行整体升级,并更名为ChunJun,希望为大家真正提供一个稳定、高效、易用的批流一体的数... ...查看全部

ChunJun 2023年第一期版本迭代问题收集

ChunJun群内解答 回复了问题 • 1 人关注 • 9 个回复 • 403 次浏览 • 2023-02-15 11:21 • 来自相关话题

袋鼠云基于Calcite框架的SQL语法扩展探索

技术共享数栈君 发表了文章 • 0 个评论 • 322 次浏览 • 2023-01-16 16:47 • 来自相关话题

Calcite在大数据系统中有着广泛的运用, 比如Apache Flink, Apache Drill等都大量使用了Calcite,理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一。但是不少人在学习Calcite的过程中... ...查看全部

袋鼠云的数据湖解决方案选型的是那个框架?Hudi、Iceberg还是Delta Lake

数据中台群内解答 回复了问题 • 1 人关注 • 1 个回复 • 455 次浏览 • 2022-12-21 14:06 • 来自相关话题

12月8日直播预告丨ChunJun数据安全—Kerberos介绍

ChunJun数栈君 发表了文章 • 0 个评论 • 273 次浏览 • 2022-12-07 16:25 • 来自相关话题

1直播介绍本次直播我们将为大家介绍ChunJun的数据安全验证——Kerberos介绍,我们将从 Kerberos 的概念开始介绍ChunJun 任务提交过程中涉及到的 Kerberos 认证以及数据同步任务运行中是如何进行 Kerberos 认证的。通过本次... ...查看全部

开源共建 | TIS整合数据同步工具ChunJun,携手完善开源生态

ChunJun数栈君 发表了文章 • 0 个评论 • 514 次浏览 • 2022-11-30 10:10 • 来自相关话题

TIS整合ChunJun实操B站视频:https://www.bilibili.com/video/BV1QM411z7w5/?spm_id_from=333.999.0.001ChunJun 概述ChunJun是一款易用、稳定、高效的批流统一的数据集成框架,... ...查看全部

开源共建 | 中国移动冯江涛:ChunJun(原FlinkX)在数据入湖中的应用

ChunJun小美 发表了文章 • 0 个评论 • 383 次浏览 • 2022-11-23 10:45 • 来自相关话题

ChunJun(原 FlinkX)是一个基于 Flink 提供易用、稳定、高效的批流统一的数据集成工具。2018 年 4 月,秉承着开源共享的理念,数栈技术团队在 github 上开源了 FlinkX,承蒙各位开发者的合作共建,FlinkX 得到了快速发展。两... ...查看全部

老哥,请教一下,咱们的框架支持数据的同步过程中的转换操作不。还是必须得端到端字段一一对应。

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 99 次浏览 • 2023-08-31 17:59 • 来自相关话题

按照教程maven编译后报错,是我的姿势不太对么,请教一下。1.12.8版本

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 114 次浏览 • 2023-08-31 17:59 • 来自相关话题

flink SQL的状态初始化是在哪个源码实现的?找了很久没有看到相似的?大佬指点一下

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 114 次浏览 • 2023-08-31 17:58 • 来自相关话题

老师您好,我提交一个mysql到hdfs任务后报错,是包没更新到最新吗

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 3 个回复 • 125 次浏览 • 2023-08-31 17:58 • 来自相关话题

为什么我查的mysql中的ADD是一个保留字,但是却在非保留关键字里出现了呢?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 3 个回复 • 108 次浏览 • 2023-08-31 17:57 • 来自相关话题

大佬们,chunjun框架支持数据etl过程,即数据的转换计算过程

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 101 次浏览 • 2023-08-31 17:57 • 来自相关话题

这段是有解决过网络抖动的问题吗

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 96 次浏览 • 2023-08-31 17:55 • 来自相关话题

这个错误能忽略不?也不知道啥问题

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 103 次浏览 • 2023-08-31 17:54 • 来自相关话题

另外请问一下binlogreader和mysqlcdcreader在实现方式上有什么区别

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 109 次浏览 • 2023-08-31 17:54 • 来自相关话题

请问http源怎么配动态参数,比如分页

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 91 次浏览 • 2023-08-31 17:53 • 来自相关话题

好代码是管出来的 ——.Net Core 集成测试与数据驱动测试

知识百科数栈君 发表了文章 • 0 个评论 • 37 次浏览 • 2023-11-17 11:59 • 来自相关话题

软件的单元测试关注是的软件最小可执行单元是否能够正常执行,但是软件是由一个个最小执行单元组成的集合体,单元与单元之间存在着种种依赖或联系,所以在软件开发时仅仅确保最小单元的正确往往是不够的,为了保证软件能够正确运行,单元与单元之间的集成测试是非常必要。  另外... ...查看全部

伴鱼基于 Flink 构建数据集成平台的设计与实现

网友分享数栈君 发表了文章 • 0 个评论 • 29 次浏览 • 2023-11-17 11:57 • 来自相关话题

数据仓库有四个基本的特征:面向主题的、集成的、相对稳定的、反映历史变化的。其中数据集成是数据仓库构建的首要前提,指将多个分散的、异构的数据源整合在一起以便于后续的数据分析。将数据集成过程平台化,将极大提升数据开发人员的效率。本文主要内容为: 数据集成 VS... ...查看全部

基于 SeaTunnel 构建 CDC 流式应用7 CDC提高触摸控制精度和可靠性

知识百科数栈君 发表了文章 • 0 个评论 • 17 次浏览 • 2023-11-15 11:34 • 来自相关话题

CClientDC CDC CPaintDC CWindowDC 的区别

知识百科数栈君 发表了文章 • 0 个评论 • 17 次浏览 • 2023-11-15 11:33 • 来自相关话题

基于 Flink CDC 的现代数据栈实践

知识百科数栈君 发表了文章 • 0 个评论 • 19 次浏览 • 2023-11-15 11:32 • 来自相关话题

Flink CDC+Kafka 加速业务实时化

知识百科数栈君 发表了文章 • 0 个评论 • 16 次浏览 • 2023-11-15 11:32 • 来自相关话题

Spark 在YARN上运行

网友分享数栈君 发表了文章 • 0 个评论 • 24 次浏览 • 2023-11-15 10:48 • 来自相关话题

在YARN上运行Spark 安全在YARN上启动Spark 添加其他JAR准备工作组态调试您的应用程序 Spark特性重要笔记的Kerberos YARN特定的Kerberos配置Kerberos故障排除配置外部随机播放服务使用Apache... ...查看全部

Flink实时读取Kafka数据写入Clickhouse并实时展示

知识百科数栈君 发表了文章 • 0 个评论 • 22 次浏览 • 2023-11-13 14:08 • 来自相关话题

基于实时计算Flink版的场景解决方案demo

知识百科数栈君 发表了文章 • 0 个评论 • 18 次浏览 • 2023-11-13 14:07 • 来自相关话题

flink实战-模拟简易双11实时统计大屏

知识百科数栈君 发表了文章 • 0 个评论 • 37 次浏览 • 2023-11-13 14:06 • 来自相关话题

背景 在大数据的实时处理中,实时的大屏展示已经成了一个很重要的展示项,比如最有名的双十一大屏实时销售总价展示。除了这个,还有一些其他场景的应用,比如我们在我们的后台系统实时的展示我们网站当前的pv、uv等等,其实做法都是类似的。 今天我们就做一个最简单的模... ...查看全部