问答 咨询一个mysql增量同步的问题

咨询一个mysql增量同步的问题

   匿名用户    发布于 2023-02-28 19:26 最新回复 2023-02-28 19:27  来自于   群内解答  256  2

第一次跑完后,prometheus中也保存了endLocation,那么第二次启动的时候,chunjun是根据什么找到prometheus中上一次保存的endLocatio?

2条回答
群内解答
回复于 2023-02-28 19:27

  需要和调度配合的。下次任务调度起来的时候需要查询对应的endlocation  


想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友,浏览袋鼠云官网:https://www.dtstack.com/?src=bbs

同时,欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」,交流最新开源技术信息,群号码:30537511,项目地址:https://github.com/DTStack/chunjun

0 1
群内解答
回复于 2023-02-28 19:27
也就是需要依赖调度系统,提前在prometheus中查询到上一次的endLocation后,再传入chunjun脚本中作为下一次任务的startLocation?
群内解答
回复于 2023-02-28 19:26

  可以了解下Taier  

0 0
社区公告
  • 大数据领域最专业的产品&技术交流社区,专注于探讨与分享大数据领域有趣又火热的信息,专业又专注的数据人园地

最新活动更多
微信扫码获取数字化转型资料
钉钉扫码加入技术交流群