Hadoop HA(高可靠)架构原理

使用Zookeeper 概念: Zookeeper是一个服务是框架,进行对像hadoop 这样程序的协调服务。Hadoop 中HDFS和Yarn 都存在单点故障,尽管在HDFS中还有SNN进行元数据备份,但每隔60m 一次的checkpoint并不能实现HDFS高容错性的特点,所以使用Zookeeper可以协调Hadoop,以选举的形式实现数据备份,避免单点故障。 *条件: ZK部署节点个数必须是
相关文章
相关标签/搜索