【Spark篇】---SparkStreaming+Kafka的两种模式receiver模式和Direct模式

一、前述 SparkStreamin是流式问题的解决的代表,一般结合kafka使用,所以本文着重讲解sparkStreaming+kafka两种模式。   二、具体 1、Receiver模式    原理图:    receiver模式理解: 在SparkStreaming程序运行起来后,Executor中会有receiver tasks接收kafka推送过来的数据。数据会被持久化,默认级别为MEM
相关文章
相关标签/搜索