这里是“全球数治”专栏周报,追踪近期全球数字治理动态近来,有两条关于特斯拉汽车的新闻颇为引人关注。一条来自美国,加州机动车管理局于当地时间1月12日宣布,正在重新评估特斯拉公司的自动驾驶测试是否需要监管。此前加州机动车管理局曾表示,由于特斯拉测试版“全自动驾驶...
1月16日下午,长三角数字干线建设启动会于青浦区举行,会上《长三角数字干线发展规划纲要》(下称规划纲要)和《长三角数字干线青浦区行动方案(2022年-2023年)》正式发布。长三角数字干线发端于上海市青浦区,以数字经济为本源,依托G50主干廊道,与沿线城市构建...
很高兴代表 Apache Kafka® 社区宣布Apache Kafka 3.1.0的发布。3.1.0 版本包含许多改进和新功能。我们将在这篇博文中重点介绍一些更突出的功能,但请参阅发行说明以获取完整的更改列表。虽然仍然不建议将 KRaft 用于生产(已知差距...
现在我们在各个场合可以看到各种各样的“云原生XXX”,云原生已经成为IT界最流行的一个定语,似乎不谈云原生就out了。但什么才是真正的云原生?把老的技术跑在云上就可以了么?貌似不太行!用阿里云高级研究员蒋江伟的一句话来定义——“因云而生才是云原生”。简单来说,...
Flink是一个分布式的流处理引擎,而流处理的其中一个特点就是7X24。那么,如何保障Flink作业的持续运行呢?Flink的内部会将应用状态(state)存储到本地内存或者嵌入式的kv数据库(RocksDB)中,由于采用的是分布式架构,Flink需要对本地生...
本文目录背景知识大数据时代的构架演进RocketMQ Connector&StreamApache Hudi构建Lakehouse实操本文标题包含三个关键词:Lakehouse、RocketMQ、Hudi。我们先从整体Lakehouse架构入手,随后逐...
2022 年 1 月 17 日 Thomas Weise ( @thweise ) & Martijn Visser ( @martijnvisser82 )Apache Flink 社区发布了 Apache Flink 1.14 系列的第二个 bug...
采用尖端系统、工具和最佳实践可以增强现代组织的能力、推动业务发展并实现突破。数据行业也不例外,每隔几个月就会出现突破性的创新。十年前,支持大数据工作负载的分布式数据管理处于争论的前沿。到 2015 年,分布式系统最常使用本地服务器和集群运行,因为将数据迁移到云...
1. 摘要本文演示了使用外部表集成 Vertica 和 Apache Hudi。在演示中我们使用 Spark 上的 Apache Hudi 将数据摄取到 S3 中,并使用 Vertica 外部表访问这些数据。2. Apache Hudi介绍Apache Hud...
2021年是“十四五”的开局之年,也是充满风险和挑战的一年。上海市第十五届人大六次会议1月20日开幕,市长龚正在作政府工作报告时表示,2021年上海精益求精提升城市治理现代化水平,减污降碳和城市精细化管理深入推进;在回顾去年疫情防控工作时龚正说,上海坚定依靠城...