• HBase集群搭建


    准备工作

    需要先安装好Zookeeper集群和Hadoop集群

    Zookeeper集群启动

    ./bin/zkServer.sh start
    ./bin/zkServer.sh start
    ./bin/zkServer.sh start
    

    Hadoop集群启动

    ./sbin/start-dfs.sh
    ./sbin/start-yarn.sh
    

    HBase集群搭建

    HBase解压

    # 选择master节点
    sudo tar -zxvf hbase-1.3.1-bin.tar.gz -C /usr/local/
    

    配置文件

    hbase-env.sh

    export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_162
    # 使用外部的zookeeper,不用自带的
    export HBASE_MANAGES_ZK=false
    

    hbase-site.xml

    <configuration>
    	<property>
    		<name>hbase.rootdir</name>
    		<value>hdfs://slave1:9000/HBase</value>
    	</property>
    	<property>
    		<name>hbase.cluster.distributed</name>
    		<value>true</value>
    	</property>
    
    	<property>
    		<name>hbase.master.port</name>
    		<value>16000</value>
    	</property>
    	<property>
    		<name>hbase.zookeeper.quorum</name>
    		<value>master,slave1,slave2</value>
    	</property>
    	<property>
    		<name>hbase.zookeeper.property.dataDir</name>
    		<value>/usr/local/zookeeper/zkData</value>
    	</property>
    </configuration>
    

    regionservers

    master
    slave1
    slave2
    

    将hadoop的hdfs-site.xml和core-site.xml配置文件软连接到HBase中,或者复制到HBase/conf下

    ln -s /usr/local/hadoop/etc/hadoop/core-site.xml /usr/local/hbase/conf/core-site.xml
    ln -s /usr/local/hadoop/etc/hadoop/hdfs-site.xml /usr/local/hbase/conf/hdfs-site.xml
    

    将hbase目录发送给其他节点

    sudo scp -r ./hbase/ hadoop@slave1:/usr/local/
    sudo scp -r ./hbase/ hadoop@slave2:/usr/local/
    

    HBase集群启动

    ./bin/start-hbase.sh
    

    如果出现下面问题,是zookeeper没有文件写入权限的原因。将zookeeper目录权限改为可写入。

    ERROR: Can't get master address from ZooKeeper; znode data == null
    
  • 相关阅读:
    高效DevOps的10项实践
    Qlik Sense Desktop
    CQRS架构
    Scala开发环境搭建与资源推荐
    Scala是一门现代的多范式编程语言
    四种优秀架构
    干净的架构The Clean Architecture
    自动更改IP地址反爬虫封锁,支持多线程(转)
    ActiveMQ源码架构解析第一节(转)
    grails的controller和action那点事---远程调试groovy代码
  • 原文地址:https://www.cnblogs.com/chenshaowei/p/12715028.html
Copyright © 2020-2023  润新知