Spark Streaming 原理剖析

通过源码呈现 Spark Streaming 的底层机制。   1. 初始化与接收数据 Spark Streaming 通过分布在各个节点上的接收器缓存接收到的流数据并将流数 据 包 装 成 Spark 能 够 处 理 的 RDD的格式 输入到Spark Streaming 之 后由Spark  Streaming将作业提交到Spark集群进行执行如图1所示。               图 1
相关文章
相关标签/搜索