spark on yarn

spark on yarn 主要是借助于yarn良好的资源管理机制。将Spark Application部署到yarn种,有如下优点: (1)部署Application和服务更加方便   只需要yarn服务,包括Spark,Storm在内的多种应用程序不要要自带服务,它们经由客户端提交后,由yarn提供的分布式缓存机制分发到各个计算节点上 (2)资源隔离机制   yarn只负责资源的管理和调度,完
相关文章
相关标签/搜索