Spark整理

Spark介绍   一个分布式的并行计算框架 spark是下一代的map-reduce,扩展了mr的数据处理流程 executor都是装载在container里运行,container默认内存是1G(参数yarn.scheduler.minimum-allocation-mb定义) AM(Application Master)在Spark中叫driver,AM向RM申请的是executor资源,当
相关文章
相关标签/搜索