• Week09_day05(Hbase的安装搭建)


    搭建完全分布式集群

    HBase集群建立在hadoop集群基础之上,所以在搭建HBase集群之前需要把Hadoop集群搭建起来,并且要考虑二者的兼容性.现在就以5台机器为例,搭建一个简单的集群.

    软件版本:hbase-0.98.12.1-hadoop2-bin.tar.gz

    3台机器IP192.168.129.101(node1)192.168. 129.102(node2)192.168. 129.103(node3)

     

    一.安装zookeeper

     

    参看:zookeeper集群安装

     

    搭建Hadoop集群

    参看:hadoop 分布式集群搭建

    先将Zookeeper集群和Hadoop集群启动起来

    三.部署hbase

    提供百度云链接(里面也提供了搭建文档)

    链接:https://pan.baidu.com/s/1qh1WH2PX-ONYecQ2n-_2QQ
    提取码:0g84 

    1.解压缩hbase的软件包,使用命令:

    tar -zxvf hbase-1.3.0-bin.tar.gz  

    2.进入hbase的配置目录,在hbase-env.sh文件里面加入java环境变量.即:

    export JAVA_HOME=/opt/jdk1.8.0_121

    关闭HBase自带的Zookeeper,使用Zookeeper集群: hbase-env.sh

    export  HBASE_MANAGES_ZK=false  

    3. 编辑hbase-site.xml ,添加配置文件:

    <?xml version="1.0"?>
    <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
    <configuration>
      <property> 
        <name>hbase.rootdir</name> 
        <value>hdfs://node:9000/hbase</value> 
      </property> 
      <property> 
        <name>hbase.cluster.distributed</name> 
        <value>true</value> 
      </property> 
      <property> 
        <name>hbase.zookeeper.quorum</name> 
        <value>node1,node2,node3</value> 
      </property> 
    </configuration>

    4. 编辑配置目录下面的文件regionservers. 命令:

    vi   regionservers    

    加入如下内容:

    node2

    node3

    5. Hbase复制到其他机器,命令如下:

    [root@node1 opt]$ scp -r hbase-1.3.0 vagrant@node2:/etc/local/share/
    [root@node1 opt]$ scp -r hbase-1.3.0 vagrant@node3:/etc/local/share/
    6. node1机器开启hbase服务。命令如下:

    [root@node1 hbase-1.3.0]$ bin/start-hbase.sh   

    node1node2node3中的任意一台机器使用bin/hbase shell 进入hbase自带的shell环境,然后使用命令version等,进行查看hbase信息及建立表等操作。 

    Hadoop安全模式导致的问题

     

     

    关闭安全模式

    hadoop dfsadmin -safemode leave

  • 相关阅读:
    Storm并行度详解
    Storm 1.0 新特性
    Storm的本地运行模式示例
    Storm-6 Storm的并行度、Grouping策略以及消息可靠处理机制简介
    Strom-7 Storm Trident 详细介绍
    Storm入门教程 第五章 一致性事务【转】
    storm入门教程 第四章 消息的可靠处理【转】
    Storm入门教程 第三章Storm集群安装部署步骤、storm开发环境
    Storm 01之 Storm基本概念及第一个demo
    storm入门教程 第一章 前言[转]
  • 原文地址:https://www.cnblogs.com/wyh-study/p/12147211.html
Copyright © 2020-2023  润新知