Spark 集群概述

本篇博客简述 Spark 集群相关的概念。 概述 Spark 的"集群"不是提供运算服务的,而是一种资源分配的调度器。 执行任务的 Spark 进程作为客户端向"集群"申请资源(运算节点), "集群"分配资源以后, 这个 Spark 进程会分解一些计算工作,并把他们放到这些申请来的资源中运行。 提交给 Spark 执行的工作称做 application(应用),对应的主程序称作:driver pr
相关文章
相关标签/搜索