【HBase】 - 单机模式、伪分布式、彻底分布式配置

Hbase 简介

Hbase: Hadoop Database

Hbase是非关系型数据库，随着如今互联网的数据量愈来愈多，需求更加多元化，传统的关系型数据库没法知足实际的业务需求，NoSql类型数据库孕育而生。

传统RDBMS缺陷：

1. 对单机性能的要求比较高，当存储海量数据时，单机的性能可能达到顶峰仍然不能知足业务需求
2. 传统关系型数据库表的字段不能改变，对于一些个性化需求产生的非结构化数据，没法处理
3. 传统关系型数据库的容量有限，将海量数据存储在一张表中，经过分库/hash一致性等方法对数据的存储和查询效率比较低

Nosql数据库：

可用于存储非结构化数据，同时采用分布式的设计基本可实现整个数据库容量的无限扩容，同时对单机的性能要求不高，基于Google的big table论文实现,HBase经过行键、列族、列实现表字段的无限扩展。

例如

address字段，可将address设定为一个列族，address:provice、address:city、address:area 3个列来表示不一样的地域，北京可只用address:city、address：area两个列，广东可以使用address:provice、address:city、address:area三个列，这样就可知足不一样地域的全部要求，若是须要引入国家，直接添加一个新的列：address:country便可，这样就可解决关系型数据库字段固定致使不灵活的缺陷

---

HBase 三种部署模式

Hbase 部署模式：单机模式、伪分布式、彻底分布式

基础：Hadoop技术体系框架基于Java开发，所以配置Hadoop框架需事先配置好JDK

注意：HBase和Hadoop存在版本匹配的关系

单机模式

单机模式：Hbase单机独立运行 配置步骤：

1. 配置$HBASE_HOME/conf/hbase-env.sh

设置JAVA_HOME环境变量：JAVA_HOME：/usr/local/jdk1.8.0_112

2. 配置$HBASE_HOME/conf/hbase-site.xml

<property>
	<name>hbase.rootdir</name>
	<value>file:///usr/local/hbase0.90.5/data</value>
</property>

解释：

hbase.rootdir:hbase存放数据的目录:file://表示本地问文件系统存储(实际存储HDFS) 3. 启动Hbase: $HBASE_HOME/bin/start-hbase.sh 4. 验证Hbase是否成功启动：控制台输入jps，若是出现Hmaster的线程表示成功开启 5. hbase shell:若能成功进入shell界面，表示Hbase的启动和配置都没问题

伪分布模式

伪分布模式：Hbase单机模拟Hbase数据库集群

安装步骤：

1. 配置$HBASE_HOME/conf/hbase-env.sh

设置JAVA_HOME环境变量：JAVA_HOME：/usr/local/jdk1.8.0_112
设置export HBASE_CLASSPATH：export HBASE_CLASSPATH=/usr/local/hadoop-0.20.2/conf

解释：HBASE_CLASSPATH绑定Hbase到Hadoop集群：主要是hadoop的core-site.xml

2. 配置$HBASE_HOME/conf/hbase-site.xml

<property>
	<name>hbase.rootdir</name>  
	<value> file:///usr/local/hbase0.90.5/data </value>
</property>
<property>
	<name>hbase.cluster.distributed </name>  
	<value>true </value>
</property>

解释：hbase.cluster.distributed :是否开启Hbase的分布式集群

3. Hbase和hadoop存在版本匹配问题：若是出现Hmaster没法或者建立的状况，可将主机上的Hadoop核心包hadoop-core-XXXX.jar替换HBase lib目录下的Hadoop-core-XXX.jar
4. 启动Hbase: $HBASE_HOME/bin/start-hbase.sh
5. 验证Hbase是否成功启动：控制台输入jps，若是出现Hmaster的线程表示成功开启
6. hbase shell:若能成功进入shell界面，表示Hbase的启动和配置都没问题

彻底分布式

彻底分布式:真实的HBase部署环境

安装步骤：

1. 配置$HBASE_HOME/conf/hbase-env.sh

设置JAVA_HOME环境变量：JAVA_HOME：/usr/local/jdk1.8.0_112
设置export HBASE_CLASSPATH:export HBASE_CLASSPATH=/usr/local/hadoop-0.20.2/conf

3. 去除注释：export HBASE_MANAGES_ZK=false 使用Hbase自带的ZooKeeper处理

解释：HBASE_CLASSPATH绑定Hbase到Hadoop集群：主要是hadoop的core-site.xml

4. 配置$HBASE_HOME/conf/hbase-site.xml以及regionservers文件(节点IP)

<property>
	<name>hbase.rootdir</name>  
	<value> file:///usr/local/hbase0.90.5/data </value>
</property>
<property>
	<name>hbase.cluster.distributed </name>  
	<value>true </value>
</property>
<property>
	<name>hbase.zookeeper.quorum</name>
	<value>master,slaves01,slaves02</value>
</property>

解释：hbase.zookeeper.quorum:Zookeeper的Znode节点，也就是HBase集群每一个节点服务器主机名，需在Hosts里面进行指定或者经过DNS服务器进行主机名解析，这里使用Hbase自带的Zookeeper进行处理

5. Hbase和hadoop存在版本匹配问题：若是出现Hmaster没法或者建立的状况，可将主机上的Hadoop核心包hadoop-core-XXXX.jar替换HBase lib目录下的Hadoop-core-XXX.jar

6. 启动Hbase: $HBASE_HOME/bin/start-hbase.sh

7. 验证Hbase是否成功启动：控制台输入jps，若是出现Hmaster的线程表示成功开启

8. hbase shell:若能成功进入shell界面，表示Hbase的启动和配置都没问题

注意：实际环境中Hbase的数据存储是构建于Hadoop HDFS基础上，只需配置hbase-site.xml文件指定HBase数据存储路径便可：

<property>
	<name>hbase.rootdir</name>  
	<value>master:9090/hbase </value>
</property>

解析：

master:9090/hbase

• master:表示Hadoop集群的Namenode节点主机名
• 9090：HDFS的服务端口,对应Hadoop core.site.xml: fs.default.name属性
• /hbase:HDFS的根目录上存储HBase数据目录(自动建立)

HBase成功启动的界面：HMaster/HRegionServer