Spark术语理解

为了理解Spark中一些术语,仔细阅读了官方文档以及查阅了相关资料,现记录如下: 1.Application: 在spark上构建的应用程序,由driver和executors构成; 2.work node:工作节点,在集群中能够运行app的任何节点。 3.driver:运行main函数并创建SparkContext的进程,在Client模式中,在集群外开启driver;cluster中,在集群中
相关文章
相关标签/搜索