Spark Streaming和Kafka 参数调优

https://www.jianshu.com/p/5c20e5bc402c 再谈Spark Streaming Kafka反压   batchDuration     :每隔batchDuration秒,切分成一个数据块(RDD)  上图中数据流也可以抽象为DStream,其内部也是很多RDD的集合 注意batchDuration和批处理时间的差别 有几个问题: batchDuration   
相关文章
相关标签/搜索