Kafka结合Spark-streaming 的两种链接方式(AWL与直连)

kafka结合spark-streaming的用法及说明以前博客有些，这里就不赘述了。apache 这篇文章说下他们结合使用的两种链接方式。(AWL与直连)网络 先看一张图： 异步 这是kafka与streaming结合的基本方式，如图spark集群中的 worker节点中 exeutor线程里的 receiver接口会一直消费kafka中的数据，那么问题来了，假如咱们定义5秒消费一次，若是spa

>>阅读原文<<