• 通过tarball形式安装HBASE Cluster(CDH5.0.2)——集群安装总览


      1,手动下载压缩包.tar(下载地址),采用tarball形式手工安装集群。

      2,共启用13台虚拟机,CentOS6.5 64bit,nn1,nn2,rm1,rm2,dn1,dn2,dn3,dn4,dn5,dn6,zk1,zk2,zk3,每台机器中已经有展开好的hadoop,hbase,和zookeeper,分别位于

          /usr/hadoop/hadoop-2.3.0-cdh5.0.2/

          /usr/hadoop/hbase-0.96.1.1-cdh5.0.2/

          /usr/hadoop/zookeeper-3.4.5-cdh5.0.2/

          确保/usr/hadoop及其子目录的所有者为hadoop用户

      3,安装时使用带有sudo权限的hadoop用户,主目录为/home/hadoop, 在用户主目录下建立了三种软件的软连接目录,这样配置环境变量是可以隔离软件版本的映像,也便于操作

            /home/hadoop/hadoop-->/usr/hadoop/hadoop-2.3.0-cdh5.0.2/

            /home/hadoop/hbase  -->/usr/hadoop/hbase-0.96.1.1-cdh5.0.2/

        /home/hadoop/zk        -->/usr/hadoop/zookeeper-3.4.5-cdh5.0.2/

      4,编辑/etc/profile,添加路径和变量,下面是我的集群中的设置片段   

    export HADOOP_DEV_HOME=/home/hadoop/hadoop
    export HADOOP_HOME=$HADOOP_DEV_HOME
    export MAVEN_HOME=/usr/lib/maven/apache-maven-3.2.2
    export ZK_HOME=/home/hadoop/zk
    export HBASE_HOME=/home/hadoop/hbase
    
    PATH=$PATH:$HADOOP_DEV_HOME/bin:$HADOOP_DEV_HOME/sbin:$MAVEN_HOME/bin:$HBASE_HOME/bin:$HBASE_HOME/sbin:$ZK_HOME/bin:$ZK_HOME/sbin
    
    JAVA_HOME=/usr/java/jdk1.7.0_60
    

      5,安装openssh及openssh client,配置好各台服务器中ssh通过rsa key的无密码互相访问

  • 相关阅读:
    Hive Word count
    Hive drop table batched
    BendFord's law's Chi square test
    Hive UDF 实验1
    java charset detector
    java Annotation Demo
    Reducejoin sample
    java Memorymapfile demo
    java :hello world
    Java dynamical proxy demo
  • 原文地址:https://www.cnblogs.com/dajianshi/p/3842574.html
Copyright © 2020-2023  润新知