Apache Beam 模型

背景 Apache Beam 是Google 开源的一个统一编程框架，它本身不是一个流式处理平台，而是提供了统一的编程模型，帮助用户创建自己的数据处理流水线，实现可以运行在任意执行引擎之上批处理和流式处理任务。它包含： 一个可以涵盖批处理和流处理的统一编程模型 Beam SDK，支持 Java 和 Python 一系列Runner（可以理解为“适配器”吧），让其编程模型运行在不同底层处理引擎（Go

>>阅读原文<<