flinkcdc

Flink向Doris表写入数据（Sink）

网友分享 • 数栈君发表了文章 • 0 个评论 • 2199 次浏览 • 2024-07-31 15:12 • 来自相关话题

业务场景最近在工作中遇到了Flink处理kafka中的数据，最后写入Doris存储的场景。Apache Doris 是一款基于 MPP 架构的高性能、实时的分析型数据库，以高效、简单、统一的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅... ...查看全部

shell脚本-expect

技术共享 • 数栈君发表了文章 • 0 个评论 • 461 次浏览 • 2024-06-27 19:23 • 来自相关话题

一、概述 Expect是建立在tcl基础上的一个工具，Expect 是用来进行自动化控制和测试的工具。主要解决shell脚本中不可交互的问题。在一些需要交互输入指令的场景下, 可通过脚本设置自动进行交互通信. 其交互流程是: spawn启... ...查看全部

flink sql 批处理

技术共享 • 数栈君发表了文章 • 0 个评论 • 607 次浏览 • 2024-06-27 19:22 • 来自相关话题

进入flink sql命令行Bashsql-client.shSource 表与所有 SQL 引擎一样，Flink 查询操作是在表上进行。与传统数据库不同，Flink 不在本地管理静态数据；相反，它的查询在外部表上连续运行。 Fli... ...查看全部

canal原理及使用

技术共享 • 数栈君发表了文章 • 0 个评论 • 479 次浏览 • 2024-06-26 11:15 • 来自相关话题

什么是canalcanal，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费。这里我们可以简单地把canal理解为一个用来同步增量数据的一个工具。工作原理MySQL主备复制原理MySQL master 将数据变更写入二进制日志( bina... ...查看全部

FLink-Canal

技术共享 • 数栈君发表了文章 • 0 个评论 • 398 次浏览 • 2024-06-25 10:41 • 来自相关话题

canal formatCanal 是一个 CDC（ChangeLog Data Capture，变更日志数据捕获）工具，可以实时地将 MySQL 变更传输到其他系统。Canal 为变更日志提供了统一的数据格式，并支持使用 JSON 或 protobuf 序列... ...查看全部

Flink关于HiveCatalog

技术共享 • 数栈君发表了文章 • 0 个评论 • 365 次浏览 • 2024-06-25 10:39 • 来自相关话题

HiveCatalogHiveCatalog 有两个用途：作为原生 Flink 元数据的持久化存储，以及作为读写现有 Hive 元数据的接口。配置在flink-sql-connector-hive-1.2.2_2.12-1.15.0.jar包上传到lfink ... ...查看全部

flink-hive方言配置（Hive Dialect）

技术共享 • 数栈君发表了文章 • 0 个评论 • 349 次浏览 • 2024-06-24 17:34 • 来自相关话题

简介在使用 Hive 方言时，Flink 允许用户用 Hive 语法来编写 SQL 语句。通过提供与 Hive 语法的兼容性，我们旨在改善与 Hive 的互操作性，并减少用户需要在 Flink 和 Hive 之间切换来执行不同语句的情况。配置F... ...查看全部

Flink 使用场景

技术共享 • 数栈君发表了文章 • 0 个评论 • 490 次浏览 • 2024-04-17 10:20 • 来自相关话题

Apache Flink 功能强大，支持开发和运行多种不同种类的应用程序。它的主要特性包括：批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink 不仅可以运行在包括 YARN、 Mesos、K8s 在内的多种资源管理框架上，还支持... ...查看全部

Flink窗口函数编程

知识百科 • 沸羊羊发表了文章 • 0 个评论 • 386 次浏览 • 2024-04-11 11:20 • 来自相关话题

在流处理领域，窗口是处理数据流的一个核心概念。它允许我们将无限的数据流划分成有限大小的数据集，以便进行聚合和分析。Apache Flink作为一个高性能的流处理框架，提供了强大的窗口操作功能，使得开发者可以方便地实现复杂的数据处理逻辑。Flink中的窗口分为几... ...查看全部

Flink批处理任务开发

知识百科 • 沸羊羊发表了文章 • 0 个评论 • 774 次浏览 • 2024-04-11 11:20 • 来自相关话题

Apache Flink作为一款开源的流处理框架，凭借其强大的实时计算能力广受业界关注。然而，Flink并非仅局限于流处理，同样具备优秀的批处理能力，能够高效处理大规模静态数据集。本文将深入探讨Flink批处理任务的开发原理，分享实践经验，并提出针对性的优化策... ...查看全部

FlinkCDC需要升级版本，以前的版本无法适配1.16.1，最近有适配计划吗

ChunJun • 群内解答回复了问题 • 1 人关注 • 1 个回复 • 756 次浏览 • 2023-03-02 11:39 • 来自相关话题

ChunJun支持Flink1.14吗？

ChunJun • 群内解答回复了问题 • 1 人关注 • 1 个回复 • 701 次浏览 • 2022-12-07 09:58 • 来自相关话题

Flink向Doris表写入数据（Sink）

网友分享 • 数栈君发表了文章 • 0 个评论 • 2199 次浏览 • 2024-07-31 15:12 • 来自相关话题

shell脚本-expect

技术共享 • 数栈君发表了文章 • 0 个评论 • 461 次浏览 • 2024-06-27 19:23 • 来自相关话题

flink sql 批处理

技术共享 • 数栈君发表了文章 • 0 个评论 • 607 次浏览 • 2024-06-27 19:22 • 来自相关话题

canal原理及使用

技术共享 • 数栈君发表了文章 • 0 个评论 • 479 次浏览 • 2024-06-26 11:15 • 来自相关话题

FLink-Canal

技术共享 • 数栈君发表了文章 • 0 个评论 • 398 次浏览 • 2024-06-25 10:41 • 来自相关话题

Flink关于HiveCatalog

技术共享 • 数栈君发表了文章 • 0 个评论 • 365 次浏览 • 2024-06-25 10:39 • 来自相关话题

flink-hive方言配置（Hive Dialect）

技术共享 • 数栈君发表了文章 • 0 个评论 • 349 次浏览 • 2024-06-24 17:34 • 来自相关话题

Flink 使用场景

技术共享 • 数栈君发表了文章 • 0 个评论 • 490 次浏览 • 2024-04-17 10:20 • 来自相关话题

Flink窗口函数编程

知识百科 • 沸羊羊发表了文章 • 0 个评论 • 386 次浏览 • 2024-04-11 11:20 • 来自相关话题

Flink批处理任务开发

知识百科 • 沸羊羊发表了文章 • 0 个评论 • 774 次浏览 • 2024-04-11 11:20 • 来自相关话题

更多...

Flink向Doris表写入数据（Sink）

shell脚本-expect

flink sql 批处理

canal原理及使用

FLink-Canal

Flink关于HiveCatalog

flink-hive方言配置（Hive Dialect）

Flink 使用场景

Flink窗口函数编程

Flink批处理任务开发

FlinkCDC需要升级版本，以前的版本无法适配1.16.1，最近有适配计划吗

ChunJun支持Flink1.14吗？

Flink向Doris表写入数据（Sink）

shell脚本-expect

flink sql 批处理

canal原理及使用

FLink-Canal

Flink关于HiveCatalog

flink-hive方言配置（Hive Dialect）

Flink 使用场景

Flink窗口函数编程

Flink批处理任务开发

话题描述

相关话题

1 人关注该话题