HBase-0.90.4集群安装配置

HBase是Hadoop数据库，能够实现随机、实时读写你的Big Data，它是Google的Bigtable的开源实现，可以参考Bigtable的论文Bigtable: A Distributed Storage System for Structured。HBase的存储模型可以如下三个词来概括：distributed, versioned, column-oriented。HBase并非只能在HDFS文件系统上使用， 你可以应用在你的本地文件系统上部署HBase实例来存储数据。

准备工作

• hbase-0.90.4.tar.gz [http://labs.renren.com/apache-mirror//hbase/stable/hbase-0.90.4.tar.gz]
• zookeeper-3.3.4.tar.gz

下面介绍Standalone和Distributed安装过程。

Standalone模式

这种安装模式，是在你的本地文件系统上安装配置一个HBase实例，安装配置比较简单。
首先，要保证你的本地系统能够通过ssh无密码访问，配置如下：

检查一下权限：你的~/.ssh目录的权限是否为755，~/.ssh/authorized_keys的权限是否为644，如果不是，执行下面的命令行：

然后，安装配置HBase，过程如下：

修改conf/hbase-env.sh中JAVA_HOME配置，指定为你的JAVA_HOME目录：

其他配置，如HBASE*指定配置项，如果需要可以进行配置。
修改hbase-site.xml中配置，示例如下：

指定HBase的数据存储目录，使用的是本地文件系统的目录。
接着，就可以启动HBase实例，提供本地存储服务：

启动完成以后，你可以跟踪一下HBase日志，看看是否启动成功了：

或者查看一下HMaster进程是否存在：

通过日志可以看出，HBase实例启动了所有的HBase和Zookeeper守护进程，并且这些进程都是在同一个JVM中。下面，可以启动HBase shell，来简单测试HBase的数据存储的基本命令：

如果想练习使用其他更多命令，可以通过help查看其他命令。

Distributed模式

基于分布式模式安装HBase，首先它是在安装在HDFS集群之上，所以，首先要做的就是能够正确配置分布式模式的HDFS集群：保证Nanemode和Datanode进程都正确启动。HBase是一个分布式NoSQL数据库，建立于HDFS之上，并且对于集群模式的HBase需要对各个结点之间的数据进行协调（Coordination），所以HBase直接将ZooKeeper作为一个分布式协调系统来实现HBase数据复制（Replication）存储。有关ZooKeeper的介绍可以参考官方文档：http://zookeeper.apache.org。
HBase的基于主从架构模式：HBase集群中存在一个Hbase Master Server，类似于HDFS中的Namenode的角色；而作为从结点的Region Server，类似于HDFS中的Datanode。
对于HBase分布式模式的安装，又基于Zookeeper的是否被HBase管理，分为两种模式：

• 基于HBase管理的Zookeeper集群，启动和关闭HBase集群，同时也控制Zookeeper集群
• 外部Zookeeper集群：一个完全独立于HBase的ZooKeeper集群，不受HBase管理控制（启动与停止ZooKeeper集群）

下面，我们基于一个单独安装的ZooKeeper集群，不基于HBase管理，进行安装。根据官网文档，很容易就能安装配置好，并尝试使用。
1、安装配置HDFS集群
启动HDFS集群实例，一台master作为Namenode结点，其余3台slaves作为Datanode结点。
其中，master服务端口为9000。
2、创建HBase存储目录

3、配置HBase
（1）解压缩HBase软件包，修改系统环境变量，在~/.bashrc中最后面加入如下配置：

使配置生效：

2）修改hbase-0.90.4/conf/hbase-env.sh脚本内容：
首先要重命名hbase-0.90.4目录下的一个目录：

默认会查找webapps目录。然后修改脚本，内容如下：

最后一个表示使用外部Zookeeper集群，而不让HBase集群去管理。
（3）修改conf/hbase-site.xml文件内容，如下所示：

上面配置中：
hbase.rootdir 指定了HBase存储的根目录是在HDFS的hdfs://master:9000/hbase目录下，该目录要被HBase集群中Region Server共享。不要忘记了，在启动HBase集群之前，在HDFS集群中创建/hbase目录，在master上执行命令hadoop fs -mkdir /hbase即可。

• hbase.cluster.distributed 指定了我们使用完全分布的模式进行安装
• hbase.zookeeper.property.dataDir 指定了HBase集群使用的ZooKeeper集群的存储目录
• hbase.zookeeper.quorum指定了用于协调HBase集群的ZooKeeper集群结点，必须配置奇数个结点，否则HBase集群启动会失败

所以，在启动HBase集群之前，首先要保证ZooKeeper集群已经成功启动。
（4）接下来，检查HBase的lib中的Hadoop的版本是否之前我们启动的HDFS集群使用的版本一致：

我直接将HBase解压缩包中的hadoop的jar文件删除，用当前使用版本的Hadoop的jar文件。这一步很重要，如果不细看官方文档，你可能会感觉很怪异，实际HBase软件包中lib下的Hadoop的版本默认是0.20的，如果你启动的HDFS使用的是0.22，则HBase启动会报版本不一致的错误。
（5）修改conf/regionservers文件，配置HBase集群中的从结点Region Server，如下所示：

一行一个主机字符串，上面使用是从结点主机的域名。上面配置，与HDFS的从结点的配置非常类似。
（6）经过上面几个骤，基本已经在一台机器上（master）配置好HBase了，这时，需要将上述的全部环境变量配置，也在各个从结点上进行配置，然后将配置好的HBase安装文件拷贝分发到各个从结点上：

4、配置Zookeeper集群
具体安装、配置和启动，详见文章 http://blog.csdn.net/shirdrn/article/details/7183503 的说明。
在开始启动HBase集群之前，要先启动Zookeeper集群，保证其运行正常。
5、启动HBase集群
启动HBase集群了，执行如下脚本：

你可以使用jps查看一下，当前master上启动的全部进程，如下所示：

其中，HMaster进程就是HBase集群的主结点服务进程。
slaves结点上启动的进程，以slave-03为例：

上面，HReginServer是HBase集群的从结点服务进程，QuorumPeerMain是ZooKeeper集群的结点服务进程。
或者，查看日志，是否出现启动异常：

6、验证HBase安装
启动HBase shell，如果能够显示如下信息则说明HBase集群启动成功：

你可以按照前面使用本地文件系统安装过程中，使用的命令来进行相关的操作。

总结说明

1、出现版本不一致错误
如果启动时出现版本不一致的错误，如下所示：

这就是说明Hadoop和HBase版本不匹配，仔细阅读文档，你会在http://hbase.apache.org/book.html#hadoop发现，解释如下所示：

将HBase解压缩包中lib的Hadoop Core jar文件替换为当前你所使用的Hadoop版本即可。
2、HBase集群启动以后，执行相关操作时抛出异常
如果HBase集群正常启动，但是在想要创建一个table的时候，出现如下异常，如下所示：

解决方法就是，修改/etc/hosts文件，修改内容以master为例，如下所示：

然后，再进行相关操作就没有问题了。