Iceberg 在基于 Flink 的流式数据入库场景中的应用

本文以流式数据入库的场景为基础,介绍引入 Iceberg 做为落地格式和嵌入 Flink sink 的收益,并分析了当前可实现的框架及要点。html 应用场景 流式数据入库,是大数据和数据湖的典型应用场景。上游的流式数据,如日志,或增量修改,经过数据总线,通过必要的处理后,汇聚并存储于数据湖,供下游的应用(如报表或者商业智能分析)使用。git 上述的应用场景一般有以下的痛点,须要整个流程不断的优化
相关文章
相关标签/搜索