3.3 Spark的部署和应用方式

1、Spark的部署

1.单机Local

2.集群

（1）Standalonc

Spark自带的资源管理器，效率不高

（2）YARN

若是部署的是Hadoop集群，能够用YARN资源调度

（3）Mesos

 

Spark和Mesos是相互优化的，它们之间性能匹配得很是好。

2、Spark的应用方式

Spark优点：

• 延迟低
• 批处理快
• 组件多

之前Spark没法知足毫秒级流计算需求，但Spark2.3（2018年）版本出来后，增长了Structured Streaming持续流模式，这意味着它能够和Flink同样，能够知足毫秒级别的流计算需求。

 

 

 

 

 

 

 

参考文献：

【1】Spark编程基础_中国大学MOOC(慕课)