Spark技术栈——SparkStreaming

SparkStreaming 1. SparkStreaming有哪几种方式消费Kafka中的数据,它们之间的区别是什么? 1.基于Receiver的方式 这种方式使用Receiver来获取数据。Receiver是使用Kafka的高层次Consumer API来实现的。receiver从Kafka中获取的数据都是存储在Spark Executor的内存中的(如果突然数据暴增,大量batch堆积,很
相关文章
相关标签/搜索