设置Hadoop+Hbase集群pid文件存储位置
有时候,咱们对运行几天或者几个月的hadoop或者hbase集群作中止操做,会发现,中止命令无论用了,为何呢?
由于基于java开发的程序,想要中止程序,必须经过进程pid来肯定,而hadoop和hbase默认的状况下,会把pid文件存储在Linux上的/tmp目录的某个目录下,进程名命令规则通常是 框架名-用户名-角色名.pid,而默认状况下,linux的tmp里面的东西,一天会删除一次,因此把pid文件放在这里面,并非长久之计,为了安全起见,咱们仍是放到一个固定的目录下最好,固然不能放在/tmp下
如何配置避免把进程文件写到临时目录下面呢?
一:Hadoop配置:
(1)修改hadoop-env.sh
修改以下,若是没有下面的设置,能够直接添加:
export HADOOP_PID_DIR=/ROOT/server/pids_hadoop_hbase
export HADOOP_SECURE_DN_PID_DIR=/ROOT/server/pids_hadoop_hbase
上述配置,影响
NameNode
DataNode
SecondaryNameNode
进程pid存储
(2)修改mapred-env.sh
修改
export HADOOP_MAPRED_PID_DIR=/ROOT/server/pids_hadoop_hbase
上述配置,影响
JobHistoryServer
进程pid存储
(3)修改yarn-env.sh
修改或者添加(不存在此项配置时),这里面我没有找到pid的环境设置变量,因此就直接添加了
export YARN_PID_DIR=/ROOT/server/pids_hadoop_hbase
上述配置,影响
NodeManager
ResourceManager
进程pid存储
二:Hbase的配置
修改hbase-env.sh
export HBASE_PID_DIR=/ROOT/server/pids_hadoop_hbase
上述配置,影响
HMaster
HRegionServer
进程pid存储
再次启动集群,就会发现指定的pids_hadoop_hbase下有进程pid文件已经存储进来:
如此以来,就安全多了,再次关闭集群时,不用再担忧进程文件找不到,而致使只能暴力 kill 相关
进程,这样作比较危险,通常状况不推荐这样作
参考文章:
http://blog.csdn.net/xiao_jun_0820/article/details/35222699
欢迎关注本站公众号,获取更多信息