spark 架构

spark简介: 1,spark 做为数据分析的一种平台,没有数据存储,强调的是基于内存的(相当吃内存)数据分析,内存不够也会磁盘进行计算! 2,可以运行很多的资源管理平台之上,比如 yarn spark 的启动: 1,通过spark-shell 进行启动(Standalone模式) #整个集群的 cpu 核数,单个节点的的内存 # 指定 master 相当
相关文章
相关标签/搜索