spark的做业提交流程

spark的做业调度分为3个级别:DAG调度器 ==>TaskScheduler(任务调度器)==> SchedulerBackend(后台调度器)shell   第一级做业调度:DAG调度器DAGScheduler框架 当咱们写好应用程序,程序里面有sc.count()或sc.collect()时,或者咱们在scalashell发出的命令中有sc.count()或sc.collect()时(这俩
相关文章
相关标签/搜索