Spark学习笔记(9)源码解读之Receiver在Driver的精妙实现

本期内容: 1. Receiver启动的方式设想 2. Receiver启动源码彻底分析 1. Receiver启动的方式设想   Spark Streaming是个运行在Spark Core上的应用程序。这个应用程序既要接收数据,还要处理数据,这些都是在分布式的集群中进行的,应该启动多个Job,让它们分工并能协调。Receiver的工作是接收数据,应该是用Spark Core中的Job来实现。
相关文章
相关标签/搜索