Spark详解(十三):Spark Streaming 运行架构分析

1. 运行架构 SparkStreaming的主要功能包括流处理引擎的流数据接收与存储以及批处理作业的生成与管理,而Spark核心负责处理Spark Streaming发送过来的作用。Spark Streaming分为Driver端和Client端,运行在Driver端为Streaming Context实例。该实例包括DStreamGraph和JobScheduler(包括ReceiveTrac
相关文章
相关标签/搜索