DStream操作概述

1、Spark运行架构 2、在spark中,一个应用由一个任务控制节点(Driver)和若干个作业(Job)组成,一个作业由多个阶段(stage)构成,一个阶段由多个任务组成(Task). 3、当执行一个应用时,任务控制节点会向集群管理器(cluster Manager)申请资源,启动exector,并向Executor发送应用程序代码和文件,然后在exector上执行task. 4.spark

>>阅读原文<<