Linux下搭建Zookeeper环境

Zookeeper 是 Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。

其工作原理示意图如下：

1.为什么使用Zookeeper

»      大部分分布式应用需要一个主控、协调器或控制器来管理物理分布的子进程（如资源、任务分配等）

»      目前，大部分应用需要开发私有的协调程序，缺乏一个通用的机制

»      协调程序的反复编写浪费，且难以形成通用、伸缩性好的协调器

»      ZooKeeper：提供通用的分布式锁服务，用以协调分布式应用

2.Zookeeper能做什么

»      Hadoop2.0，使用Zookeeper的事件处理确保整个集群只有一个活跃的NameNode，存储配置信息等

»      HBase，使用Zookeeper的事件处理确保整个集群只有一个HMaster，察觉HRegionServer联机和宕机,存储访问控制列表等

3.Zookeeper的特性

»      Zookeeper是简单的

»      Zookeeper是富有表现力的

»      Zookeeper具有高可用性

»      Zookeeper采用松耦合交互方式

»      Zookeeper是一个资源库

 

4.在Linux下的配置

我们启动三个主机，每个执行相同的操作。

首先下载压缩包

http://labs.renren.com/apache-mirror/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz

进行解压tar -zxvf zookeeper-3.4.5.tar.gz -C /home/hadoop/app

在zookeeper/conf/zoo.cfg中进行如下配置：（刚开始是zoo_sample.cfg，重命名一下，最下面三个是三台主机的IP）

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just
# example sakes.
dataDir=/home/hadoop/app/zookeeper-3.4.5/data
# the port at which the clients will connect
clientPort=2181
#
# Be sure to read the maintenance section of the
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=192.168.230.135:2888:3888
server.2=192.168.230.136:2888:3888
server.3=192.168.230.137:2888:3888

回到data目录下（data目录是自己建的zookeeper/data），分别在不同主机下执行echo 1 > myid，echo 2 > myid，echo 3 > myid

在zookeeper/bin目录下，进行启动：./zkServer.sh start（关闭是 ./zkServer.sh stop）

进行监控：./zkServer.sh status

可以看到一台主节点，两台从节点。

批量启动zookeeper服务器脚本（可以自己修改）：

#!/bin/sh
echo 'start zkServer...'
for i in 1 2 3
do
ssh weekend0$i 'source /etc/profile;/home/hadoop/app/zookeeper-3.4.5/bin/zkServer.sh start'
done