spark streaming 3: Receiver 到 submitJobSet

spark streaming 3: Receiver 到 submitJobSet  对于spark streaming来说，receiver是数据的源头。spark streaming的框架上，将receiver替换spark-core的以磁盘为数据源的做法，但是数据源（如监听某个tcp链接）显然不是可靠且不知道数据什么时候准备好的，所以spark streaming使用shuffle隔离re

>>阅读原文<<