Spark DAG优化的解读

一,Spark专业术语的解析 1,Application基于Spark的用户程序,包含了driver程序和集群上的executor 2,Driver Program运行main函数并且新建SparkContext的程序 3,Cluster Manager在集群上获取资源的外部服务(例如standalone,Mesos,Yarn) 4,Worker Node是集群中任何可以运行用代码的节点 5,Ex
相关文章
相关标签/搜索