1,手动下载压缩包.tar(下载地址),采用tarball形式手工安装集群。
2,共启用13台虚拟机,CentOS6.5 64bit,nn1,nn2,rm1,rm2,dn1,dn2,dn3,dn4,dn5,dn6,zk1,zk2,zk3,每台机器中已经有展开好的hadoop,hbase,和zookeeper,分别位于
/usr/hadoop/hadoop-2.3.0-cdh5.0.2/
/usr/hadoop/hbase-0.96.1.1-cdh5.0.2/
/usr/hadoop/zookeeper-3.4.5-cdh5.0.2/
确保/usr/hadoop及其子目录的所有者为hadoop用户
3,安装时使用带有sudo权限的hadoop用户,主目录为/home/hadoop, 在用户主目录下建立了三种软件的软连接目录,这样配置环境变量是可以隔离软件版本的映像,也便于操作
/home/hadoop/hadoop-->/usr/hadoop/hadoop-2.3.0-cdh5.0.2/
/home/hadoop/hbase -->/usr/hadoop/hbase-0.96.1.1-cdh5.0.2/
/home/hadoop/zk -->/usr/hadoop/zookeeper-3.4.5-cdh5.0.2/
4,编辑/etc/profile,添加路径和变量,下面是我的集群中的设置片段
export HADOOP_DEV_HOME=/home/hadoop/hadoop export HADOOP_HOME=$HADOOP_DEV_HOME export MAVEN_HOME=/usr/lib/maven/apache-maven-3.2.2 export ZK_HOME=/home/hadoop/zk export HBASE_HOME=/home/hadoop/hbase PATH=$PATH:$HADOOP_DEV_HOME/bin:$HADOOP_DEV_HOME/sbin:$MAVEN_HOME/bin:$HBASE_HOME/bin:$HBASE_HOME/sbin:$ZK_HOME/bin:$ZK_HOME/sbin JAVA_HOME=/usr/java/jdk1.7.0_60
5,安装openssh及openssh client,配置好各台服务器中ssh通过rsa key的无密码互相访问