Introducing Flink's Native S3 FileSystem
flink.apache.org原文 ↗
Apache Flink 宣布 native S3 filesystem,把 S3 访问作为生产级文件系统能力直接纳入 Flink 生态。S3 对 Flink 不只是普通输入输出,它还承载 checkpoint、savepoint 和数据湖写入等关键路径。原生实现的看点在于运行时可以更细地处理对象存储的吞吐、重试和一致性边界,而不完全依赖外部适配层。
–浏览
评论 · Comments