SparkStreaming介绍以及演示示例程序

简介:SparkStreaming是spark的一个模块,进行实时流数据的处理,如何处理呢,就是把数据流沿用一系列的批次数据,然后用DStream的抽象封装 那么DStream是什么呢?RDD + 时间 = 有一个抽象的DStream,代表一个连续的数据流 我们都知道,spark的抽象是RDD,用SparkContext抽象进行封装,sparkSQL的抽象是DataSet/DataFrame,用S
相关文章
相关标签/搜索