Spark与Kafka整合原理

spark和kafka整合有2中方式 1、receiver 顾名思义:就是有一个线程负责获取数据，这个线程叫receiver线程 解释： 1、Spark集群中的某个executor中有一个receiver线程，这个线程负责从kafka中获取数据  注意：这里的获取数据并不是从kafka中拉(pull) 而是接收数据，具体原理是该receiver线程发送请求到kafka，这个请求包含对kafka中每

>>阅读原文<<