开源框架

开源框架

Flink多流处理之Broadcast(广播变量)

网友分享数栈君 发表了文章 • 0 个评论 • 487 次浏览 • 2023-09-14 10:48 • 来自相关话题

写过Spark批处理的应该都知道,有一个广播变量broadcast这样的一个算子,可以优化我们计算的过程,有效的提高效率;同样在Flink中也有broadcast,简单来说和Spark中的类似,但是有所区别,首先Spark中的broadcast是静态的数据,而... ...查看全部

Flink 保存点

知识百科数栈君 发表了文章 • 0 个评论 • 148 次浏览 • 2023-08-22 10:40 • 来自相关话题

Redis下载和安装(Windows系统)

网友分享数栈君 发表了文章 • 0 个评论 • 309 次浏览 • 2023-08-17 10:39 • 来自相关话题

虽然 Redis 官方网站没有提供 Windows 版的安装包,但可以通过 GitHub 来下载 Windows 版 Redis 安装包,下载地址:https://github.com/tporadowski/redis/releases注意:Windows ... ...查看全部

Redis简介

知识百科数栈君 发表了文章 • 0 个评论 • 137 次浏览 • 2023-08-17 10:36 • 来自相关话题

大数据Doris(五十三):MySQL Dump 导出

网友分享数栈君 发表了文章 • 0 个评论 • 370 次浏览 • 2023-07-06 11:52 • 来自相关话题

mysql备份或者导出表结构与数据,可以使用mysqldump命令,前提需要找一台安装过mysql的服务器上才能执行;直接使用mysqldump备份数据库,存在问题:备份完成之前,会把所有的表锁住,导致无法写入;可以带着--single-transaction... ...查看全部

大数据Doris(五十四):BACKUP数据备份原理和语法

网友分享数栈君 发表了文章 • 0 个评论 • 457 次浏览 • 2023-07-06 11:52 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

大数据Doris(五十五):BACKUP数据备份案例和注意事项

网友分享数栈君 发表了文章 • 0 个评论 • 583 次浏览 • 2023-07-06 11:52 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

大数据Doris(五十六):RESOTRE数据恢复

网友分享数栈君 发表了文章 • 0 个评论 • 252 次浏览 • 2023-07-06 11:51 • 来自相关话题

Doris 支持将当前数据以文件的形式,通过 broker 备份到远端存储系统中。之后可以通过 恢复 命令,从远端存储系统中将数据恢复到任意 Doris 集群。通过这个功能,Doris可以支持将数据定期的进行快照备份。也可以通过这个功能,在不同集群间进行数据迁... ...查看全部

大数据Doris(五十七):RECOVER数据删除恢复

网友分享数栈君 发表了文章 • 0 个评论 • 388 次浏览 • 2023-07-06 11:51 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

命令消费kafka报错(id: -1 rack: null) disconnected

网友分享数栈君 发表了文章 • 0 个评论 • 586 次浏览 • 2023-07-06 11:50 • 来自相关话题

CDP 717环境使用kafka-console-consumer 命令消费kafka报错如下23/03/28 09:19:07 WARN clients.NetworkClient: [Consumer clientId=consumer-console-c... ...查看全部
条新动态, 点击查看
可以注册到同一个zk下 通过zk来分配节点任务想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术... 显示全部 »
可以注册到同一个zk下 通过zk来分配节点任务想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack/Taier  
针对这个问题,可以在我们的github上提一个issue:https://github.com/DTStack/Taier/issues想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.... 显示全部 »
针对这个问题,可以在我们的github上提一个issue:https://github.com/DTStack/Taier/issues想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack/Taier
可以把脏数据写到mysql到表里想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新... 显示全部 »
可以把脏数据写到mysql到表里想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack/Taier
https://github.com/DTStack/Taier/commit/7c241e3ad6c5764034279e31f86e2224c0777483 这个commit修复过的 你可以手动打包试下想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客... 显示全部 »
https://github.com/DTStack/Taier/commit/7c241e3ad6c5764034279e31f86e2224c0777483 这个commit修复过的 你可以手动打包试下想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack/Taier

新起点!大数据分布式可视化的 DAG 任务调度系统 Taier 正式发布1.4版本

Taier数栈君 发表了文章 • 0 个评论 • 401 次浏览 • 2023-04-18 18:50 • 来自相关话题

我们很高兴向大家宣布,2023年4月14日,Taier(github.com/DTStack/Taier)正式发布 1.4 版本。自2022年2月份 Taier 正式开源以来,收到了很多开发者和行业用户的积极评价,在诸多生产环境中已得到充分应用。Taier 1... ...查看全部

ChunJun 顺利晋级“2022 年中国开源创新大赛”决赛,并荣获“优秀开源项目/社区”奖项

ChunJun数栈君 发表了文章 • 0 个评论 • 329 次浏览 • 2023-03-14 11:13 • 来自相关话题

日前,“2022年中国开源创新大赛”初赛晋级名单公布,易用、稳定、高效的批流统一的数据集成框架 ChunJun 顺利晋级决赛,并荣获“2022年中国开源创新大赛优秀开源项目/社区”奖项。感谢组委会专家的认可,ChunJun也将继续秉承技术初心,砥砺前行,不遗余... ...查看全部

在搭建Taier环境的时候官网说需要部署Flink on yarn模式。有人比较熟悉flink on yarn部署的吗?

Taier群内解答 回复了问题 • 1 人关注 • 4 个回复 • 727 次浏览 • 2023-02-09 11:07 • 来自相关话题

12月8日直播预告丨ChunJun数据安全—Kerberos介绍

ChunJun数栈君 发表了文章 • 0 个评论 • 402 次浏览 • 2022-12-07 16:25 • 来自相关话题

1直播介绍本次直播我们将为大家介绍ChunJun的数据安全验证——Kerberos介绍,我们将从 Kerberos 的概念开始介绍ChunJun 任务提交过程中涉及到的 Kerberos 认证以及数据同步任务运行中是如何进行 Kerberos 认证的。通过本次... ...查看全部

开源共建 | TIS整合数据同步工具ChunJun,携手完善开源生态

ChunJun数栈君 发表了文章 • 0 个评论 • 696 次浏览 • 2022-11-30 10:10 • 来自相关话题

TIS整合ChunJun实操B站视频:https://www.bilibili.com/video/BV1QM411z7w5/?spm_id_from=333.999.0.001ChunJun 概述ChunJun是一款易用、稳定、高效的批流统一的数据集成框架,... ...查看全部

ChengYing的这个错误是因为什么

ChengYing群内解答 回复了问题 • 1 人关注 • 1 个回复 • 495 次浏览 • 2022-11-23 10:41 • 来自相关话题

袋鼠云数栈技术团队入选开源中国“2021年度优秀开源技术团队”

开源动态数栈君 发表了文章 • 0 个评论 • 868 次浏览 • 2021-12-21 15:53 • 来自相关话题

日前,袋鼠云数栈技术团队被开源中国评选为“2021 年度 OSCHINA 优秀开源技术团队”。Github India的总经理Maneesh Sharma说:“开源是创新的推动者,使组织能够快速获得全球人才库和开发安全、可靠和可扩展的软件的工具。”开源不仅可以... ...查看全部

你好想问下提交flinksql任务的时候 Configuration 下面的 Interval Periodic checkpoints disabled

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 279 次浏览 • 2023-06-21 17:03 • 来自相关话题

chunjun支持实时mysql迁移到clickhouse吗?有没有已经在正常运行的json做参考

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 263 次浏览 • 2023-06-21 17:02 • 来自相关话题

大神们,请问1.16什么时候release有计划吗?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 262 次浏览 • 2023-06-21 17:01 • 来自相关话题

mysql迁移到clickhouse,大字段 容易出现clickhouse response超时 是什么原因呢

回复

ChunJun匿名用户 发起了问题 • 1 人关注 • 0 个回复 • 262 次浏览 • 2023-06-21 17:00 • 来自相关话题

老师们早上好,binlog同步MySQL,出现这个错误是bug么?

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 271 次浏览 • 2023-06-21 16:59 • 来自相关话题

老师,请问rabbitMQ支持sslConfig吗(开启ssl连接认证),看着elasticSearch是支持的

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 260 次浏览 • 2023-06-21 16:59 • 来自相关话题

各位大佬,native-k8s模式如何使用,有没有一个quickstart

回复

ChunJun匿名用户 发起了问题 • 2 人关注 • 0 个回复 • 245 次浏览 • 2023-06-21 16:58 • 来自相关话题

数据还原,支持DDL的变更, 有这样的mysql 到mysql的模版吗?chunjun v1.12.8的。

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 250 次浏览 • 2023-06-21 16:55 • 来自相关话题

老师您好,想要实现mongo到mongo的数据传输,

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 2 个回复 • 272 次浏览 • 2023-06-21 16:54 • 来自相关话题

chunjun支持实时采集Oracle 吗

回复

ChunJun群内解答 回复了问题 • 1 人关注 • 1 个回复 • 304 次浏览 • 2023-06-21 16:53 • 来自相关话题

Flink多流处理之Broadcast(广播变量)

网友分享数栈君 发表了文章 • 0 个评论 • 487 次浏览 • 2023-09-14 10:48 • 来自相关话题

写过Spark批处理的应该都知道,有一个广播变量broadcast这样的一个算子,可以优化我们计算的过程,有效的提高效率;同样在Flink中也有broadcast,简单来说和Spark中的类似,但是有所区别,首先Spark中的broadcast是静态的数据,而... ...查看全部

Flink 保存点

知识百科数栈君 发表了文章 • 0 个评论 • 148 次浏览 • 2023-08-22 10:40 • 来自相关话题

Redis下载和安装(Windows系统)

网友分享数栈君 发表了文章 • 0 个评论 • 309 次浏览 • 2023-08-17 10:39 • 来自相关话题

虽然 Redis 官方网站没有提供 Windows 版的安装包,但可以通过 GitHub 来下载 Windows 版 Redis 安装包,下载地址:https://github.com/tporadowski/redis/releases注意:Windows ... ...查看全部

Redis简介

知识百科数栈君 发表了文章 • 0 个评论 • 137 次浏览 • 2023-08-17 10:36 • 来自相关话题

大数据Doris(五十三):MySQL Dump 导出

网友分享数栈君 发表了文章 • 0 个评论 • 370 次浏览 • 2023-07-06 11:52 • 来自相关话题

mysql备份或者导出表结构与数据,可以使用mysqldump命令,前提需要找一台安装过mysql的服务器上才能执行;直接使用mysqldump备份数据库,存在问题:备份完成之前,会把所有的表锁住,导致无法写入;可以带着--single-transaction... ...查看全部

大数据Doris(五十四):BACKUP数据备份原理和语法

网友分享数栈君 发表了文章 • 0 个评论 • 457 次浏览 • 2023-07-06 11:52 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

大数据Doris(五十五):BACKUP数据备份案例和注意事项

网友分享数栈君 发表了文章 • 0 个评论 • 583 次浏览 • 2023-07-06 11:52 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

大数据Doris(五十六):RESOTRE数据恢复

网友分享数栈君 发表了文章 • 0 个评论 • 252 次浏览 • 2023-07-06 11:51 • 来自相关话题

Doris 支持将当前数据以文件的形式,通过 broker 备份到远端存储系统中。之后可以通过 恢复 命令,从远端存储系统中将数据恢复到任意 Doris 集群。通过这个功能,Doris可以支持将数据定期的进行快照备份。也可以通过这个功能,在不同集群间进行数据迁... ...查看全部

大数据Doris(五十七):RECOVER数据删除恢复

网友分享数栈君 发表了文章 • 0 个评论 • 388 次浏览 • 2023-07-06 11:51 • 来自相关话题

一、基本原理备份(Backup)备份操作是将指定表或分区的数据,直接以 Doris 存储的文件的形式,上传到远端仓库中进行存储。Backup命令为异步操作,提交成功后需要通过 SHOW BACKUP 命令查看进度,仅支持备份 OLAP 类型的表。当用户提交 B... ...查看全部

命令消费kafka报错(id: -1 rack: null) disconnected

网友分享数栈君 发表了文章 • 0 个评论 • 586 次浏览 • 2023-07-06 11:50 • 来自相关话题

CDP 717环境使用kafka-console-consumer 命令消费kafka报错如下23/03/28 09:19:07 WARN clients.NetworkClient: [Consumer clientId=consumer-console-c... ...查看全部