搭建完全分布式集群
HBase集群建立在hadoop集群基础之上,所以在搭建HBase集群之前需要把Hadoop集群搭建起来,并且要考虑二者的兼容性.现在就以5台机器为例,搭建一个简单的集群.
软件版本:hbase-0.98.12.1-hadoop2-bin.tar.gz
3台机器IP:192.168.129.101(node1)、192.168. 129.102(node2)、192.168. 129.103(node3)、
一.安装zookeeper
二. 搭建Hadoop集群
先将Zookeeper集群和Hadoop集群启动起来
三.部署hbase
提供百度云链接(里面也提供了搭建文档)
链接:https://pan.baidu.com/s/1qh1WH2PX-ONYecQ2n-_2QQ
提取码:0g84
1.解压缩hbase的软件包,使用命令:
tar -zxvf hbase-1.3.0-bin.tar.gz
2.进入hbase的配置目录,在hbase-env.sh文件里面加入java环境变量.即:
export JAVA_HOME=/opt/jdk1.8.0_121
关闭HBase自带的Zookeeper,使用Zookeeper集群: hbase-env.sh
export HBASE_MANAGES_ZK=false
3. 编辑hbase-site.xml ,添加配置文件:
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://node:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>node1,node2,node3</value>
</property>
</configuration>
4. 编辑配置目录下面的文件regionservers. 命令:
vi regionservers
加入如下内容:
node2
node3
5. 把Hbase复制到其他机器,命令如下:
[root@node1 opt]$ scp -r hbase-1.3.0 vagrant@node2:/etc/local/share/
[root@node1 opt]$ scp -r hbase-1.3.0 vagrant@node3:/etc/local/share/
6. 在node1机器开启hbase服务。命令如下:
[root@node1 hbase-1.3.0]$ bin/start-hbase.sh
在node1、node2、node3中的任意一台机器使用bin/hbase shell 进入hbase自带的shell环境,然后使用命令version等,进行查看hbase信息及建立表等操作。
Hadoop安全模式导致的问题
关闭安全模式
hadoop dfsadmin -safemode leave