玩转大数据-如何搭建Hbase集群

2019年6月9日 210次阅读 来源: 丁小晶的晶小丁 
小编的上一篇文章说了如何搭建hadoop集群，我们的目的还是为了去最终搭建一个成功的Hbase集群，不说太多废话，我们直接上教程。
本文只给出如何搭建Hbase集群的方法。但是Hbase最重要的一个步骤其实是性能调优，Hbase调优之路很漫长，还请各位慢慢研究
重要的事情说三遍：
在此之前确认你的Hadoop集群已经运行起来！
在此之前确认你的Hadoop集群已经运行起来！
在此之前确认你的Hadoop集群已经运行起来！

我们就搭建一套全分布式的Hbase数据库系统（以下步骤和互联网上雷同，但某些情况下网上版本较低，如使用新版本Hbase还请参阅本方法）：

对于全分布式的HBase安装，需要通过hbase-site.xml文档来配置本机的HBase特性，由于各个HBase之间通过zookeeper来进行通信，因此需要维护一组zookeeper系统，关于zookeeper的安装使用，参考《hadoop2.6完全分布式安装zookeeper3.4.6》
关于HBase的介绍，可以看这里《HBase简介》
1、安装Hbase（1）下载hbase版本
下载地址：http://www.apache.org/dyn/closer.cgi/hbase/，在此路径下选择相应的版本下载，本次安装下载hadoop1.1.0.1版本（2）解压hbase-1.1.0.1-bin.tar.gz
hadoop@master:~/opt$ tar zxvf hbase-1.1.0.1-bin.tar.gz

（3）将hbase添加到环境变量中
export HBASE_HOME=/home/hadoop/opt/hbase-1.1.0.1export PATH=$HBASE_HOME/bin:$PATH

（4）修改配置文件
修改hbase-env.sh
export JAVA_HOME=/home/hadoop/opt/jdk1.8.0_65

修改hbase-site.xml
<configuration><property><name>hbase.rootdir</name><value>hdfs://master:9000/hbase</value></property><property><name>hbase.cluster.distributed</name><value>true</value></property><property><name>hbase.zookeeper.quorum</name><value>master,slave1</value></property><property><name>hbase.zookeeper.property.dataDir</name><value>/home/hadoop/opt/zookeeper-3.4.6</value></property></configuration>

修改regionservers，将文件内容设置为:
masterslave12、运行HBase启动hbase时要确保hdfs已经启动，HBase的启动顺序为：HDFS->Zookeeper->HBase，运行命令如下:
hadoop@master:~/opt/hadoop-2.6.0$ bin/hdfs namenode -formathadoop@master:~/opt/hadoop-2.6.0$ sbin/start-dfs.shhadoop@master:~/opt/zookeeper-3.4.6$ ./zkServer.sh starthadoop@master:~/opt/hbase-1.1.0.1$ start-hbase.sh

启动成功后集群会多出如下进程：
hadoop@master:~/opt/hbase-1.1.0.1$ jps

8145 SecondaryNameNode7940 NameNode8550 HRegionServer5719 QuorumPeerMain8600 Jps8424 HMaster运行成功后可以看到QuorumPeerMain进程再看看slave1的进程：
hadoop@slave1:~/opt/zookeeper-3.4.6/bin$ jps

6915 QuorumPeerMain7012 HRegionServer7268 Jps6823 DataNode进入HBase Shell
hadoop@master:~/opt/hbase-1.1.0.1$ ./bin/hbase shell

输入status命令：
hbase(main):001:0> status

出现错误：
2015-05-25 20:26:14,949 ERROR [main] client.ConnectionManager$HConnectionImplementation: Can’t get connection to ZooKeeper: KeeperErrorCode = ConnectionLoss for /hbase设置 conf/hbase-env.sh文件中的HBASE_MANAGES_ZK 属性为 false问题搞定！
hbase(main):001:0> status

2 servers, 0 dead, 1.0000 average load

    原文作者：丁小晶的晶小丁
    原文地址: https://www.jianshu.com/p/2ab6975f5072
    本文转自网络文章，转载此文章仅为分享知识，如有侵权，请联系博主进行删除。
点赞