spark从kafka中获取数据

spark从kafka获取数据两种方式 1.kafkaUtils.createStream 利用 Kafka 消费者高级 API 在 Spark 的工做节点上建立消费者线程，订阅 Kafka 中的消息，数据会传输到 Spark 工做节点的执行器中，可是默认配置下这种方法在 Spark Job 出错时会致使数据丢失，若是要保证数据可靠性，须要在 Spark Streaming 中开启 Write A

>>阅读原文<<