Spark Streaming——Checkpoint

转载:源文链接 一个Streaming Application每每须要7*24不间断的跑,因此须要有抵御意外的能力(好比机器或系统挂掉,JVM crash等)。为了让这成为可能,Spark Streaming须要checkpoint足够多信息至一个具备容错设计的存储系统才能让Application从失败中恢复。Spark Streaming会checkpoint两种类型的数据。web Metada
相关文章
相关标签/搜索