hadoop和hbase节点添加和单独重启

有时候hadoop或hbase集群运行时间久了后,某些节点就会失效,这个时候若是不想重启整个集群(这种状况在不少状况下已经不被容许),这个时候能够单独重启失效节点。node

HADOOP:
hadoop中重启单节点的方法和增长新节点实际上是同样的。
一、咱们先看下如何了解hadoop机器的状况,能够用命令:
hadoop dfsadmin -report 查看集群容量状况,不少状况下失效节点也能够从这里了解到(好比失效节点容量显示为0)。
也能够用web查看: http://ip:54030/jobtracker.jsp
二、重启或添加节点:
$bin/hadoop-daemon.sh start datanode 
   $bin/hadoop-daemon.sh start tasktracker
固然,添加的话须要copy配置文件到新节点。重启的话先   $bin/hadoop-daemon.sh stop datanode/  tasktracker
三、从新balancer(可选)
$bin/hadoop balancer
其实集群本身会balancer,固然也能够像上面那样手动balancer,否则在繁忙时段最好避免。

HBASE:
不少时候,节点失效是由于pid文件被删除引发(默认pid文件中/tmp下),因此最好把不少默认是/tmp的目录修改为本身的目录,好比hbase的 pid配置能够在hbase-env.sh中,修改export HBASE_PID_DIR=/var/hadoop/pids就能够。hbase节点失效常对应60020端口异常。
进入hbase shell
一、查看节点状况:
status
固然,也能够经过web页面查看(若是服务开放的话):
http://serviceIp:60010/master.jsp

http://serviceIp:60030/regionserver.jspweb

http://serviceIp:60010/zk.jspshell

二、重启
$bin/hbase-daemon.sh stop regionserver
$bin/hbase-daemon.sh start regionserver
也能够添加新的master(默认只有一个master),$bin/hbase-daemon.sh start master
相关文章
相关标签/搜索