Spark Streaming-Dstream建立

       Spark Streaming原生支持一些不一样的数据源。一些“核心”数据源已经被打包到Spark Streaming 的 Maven 工件中,而其余的一些则能够经过 spark-streaming-kafka 等附加工件获取。每一个接收器都以 Spark 执行器程序中一个长期运行的任务的形式运行,所以会占据分配给应用的 CPU 核心。此外,咱们还须要有可用的 CPU 核心来处理数据
相关文章
相关标签/搜索