大数据Spark企业级实战版【学习笔记】-----Spark Streaming 的构架

1.3.2.1 Spark Streaming 的构架      计算流程:Spark Streaming是将流式计算分解成一系列短小的批处理作业。这里的批处理引擎是Spark,也就是把Spark Streaming的输入数据按照batch size(如1秒)分成一段一段的数据(DiscretizedStream),每一段数据转换成Spark中的RDD,然后将Spark Streaming中对DS
相关文章
相关标签/搜索