Spark Streaming 遇到 kafka

Spark Streaming 遇到 kafka 站酷 | 插画 搭建流程略，主要讲一下如何更好的结合使用，看图说话。 Kafka 结合 Spark Streaming 实现在线的准实时流分析，除了保证数据源和数据接收的可靠性，还要保证元数据的 checkpoint 。 以上的方案，不能防止数据的丢失。 Executor 收到数据后开始执行任务了。但是这时候 Driver 挂掉了，相应的 Exec

>>阅读原文<<