问答 请问下Hive的写入机制是怎样的，Kafka到Hive一直不把临时数据转换为正式hive数据文件

请问下Hive的写入机制是怎样的，Kafka到Hive一直不把临时数据转换为正式hive数据文件

   匿名用户    发布于 2023-06-02 10:34 最新回复 2023-06-02 10:35  来自于   群内解答  161  1
是必须写满1G临时文件才会替换成正式Hive数据文件吗  /user/hive/warehouse/car_info_kafkaf/pt=20230522/.data
http://dtstack-static.oss-cn-hangzhou.aliyuncs.com/2021bbs/files_user166259/question/9aa375e19f32f22d2c417769b8736f63..png
  
1条回答
群内解答
回复于 2023-06-02 10:35

  checkpoint或者任务结束前会将.data里的文件移动到外面



想了解或咨询更多有关袋鼠云大数据产品、行业解决方案、客户案例的朋友，浏览袋鼠云官网：https://www.dtstack.com/?src=bbs


同时，欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」，交流最新开源技术信息，群号码：30537511，项目地址：

https://github.com/DTStack/chunjun    


  

0 0
回复
上一篇：纯钧现在对应的驱动，有对应的各个组件的适配版本号推荐吗？
下一篇：

社区公告

  • 大数据领域最专业的产品&技术交流社区，专注于探讨与分享大数据领域有趣又火热的信息，专业又专注的数据人园地

最新活动更多
微信扫码获取数字化转型资料
钉钉扫码加入技术交流群
热门产品
数雁EasyDigit 数栈DTinsight 数驹DTengine 易知微EasyV
解决方案
政务解决方案 港口解决方案 基金解决方案 制造解决方案 保险解决方案 高校解决方案 证券解决方案 文旅解决方案 银行解决方案 大宗商品解决方案
快速入口
合作与生态 开源社区 Github
联系我们

合作咨询 market@dtstack.com

联系电话 400-002-1024

总部地址 杭州市余杭区余杭塘路2301号海智中心8号楼

袋鼠云官方订阅号
袋鼠云官方订阅号
热门搜索：
数据中台 企业数据中台 金融数据中台 离线数据中台 数据中台公司 一站式数据中台 数据中台开发 一站式数据开发 数据中台解决方案 大数据分析 数据分析平台 新基建 大数据开发 大数据开发平台 数据化转型解决方案 信创 数据可视化 数字孪生 可视化大屏 数字化转型

友情链接： 易知微 云掣

@Copyrights 2016-2023 杭州玳数科技有限公司 浙ICP备15044486号-1 浙公网安备33011002011932号