spark streaming 有趣问题汇总

1. 关于spark.streaming.concurrent.job参数的问题 1）当参数环境：6个executor，kafka topic 有3个partition，spark.streaming.concurrent.job=1 时 则：只有3个exevutor有task在跑，这个比较好理解，一个executor处理一个分区数据 2）当参数环境：6个executor，kafka topic

>>阅读原文<<