【总结】Spark容错机制

容错方式 容错 指的是一个系统在部分模块出现故障时还可否持续的对外提供服务，一个高可用的系统应该具备很高的容错性；对于一个大的集群系统来讲，机器故障、网络异常等都是很常见的，Spark这样的大型分布式计算集群提供了不少的容错机制来提升整个系统的可用性。 node 通常来讲，分布式数据集的容错性有两种方式：数据检查点和记录数据的更新。 面向大规模数据分析，数据检查点操做成本很高，须要经过数据中心的网

>>阅读原文<<