• ZooKeeper 3.5.0 分布式配置问题


    ZooKeeper 3.5.0 分布式配置好后,执行./zkServer.sh start 命令启动,报如下错误:

    2015-07-02 21:06:01,671 [myid:] - INFO [main:QuorumPeerConfig@109] - Reading configuration from: /usr/zookeeper/bin/../conf/zoo.cfg
    2015-07-02 21:06:01,682 [myid:] - ERROR [main:QuorumPeerMain@86] - Invalid config, exiting abnormally
    org.apache.zookeeper.server.quorum.QuorumPeerConfig$ConfigException: Address unresolved: Master.Hadoop:3888
    at org.apache.zookeeper.server.quorum.QuorumPeer$QuorumServer.<init>(QuorumPeer.java:205)
    at org.apache.zookeeper.server.quorum.flexible.QuorumMaj.<init>(QuorumMaj.java:89)
    at org.apache.zookeeper.server.quorum.QuorumPeerConfig.createQuorumVerifier(QuorumPeerConfig.java:401)
    at org.apache.zookeeper.server.quorum.QuorumPeerConfig.parseDynamicConfig(QuorumPeerConfig.java:425)
    at org.apache.zookeeper.server.quorum.QuorumPeerConfig.parseProperties(QuorumPeerConfig.java:291)
    at org.apache.zookeeper.server.quorum.QuorumPeerConfig.parse(QuorumPeerConfig.java:126)
    at org.apache.zookeeper.server.quorum.QuorumPeerMain.initializeAndRun(QuorumPeerMain.java:110)
    at org.apache.zookeeper.server.quorum.QuorumPeerMain.main(QuorumPeerMain.java:79)
    Invalid config, exiting abnormally

    网上也没有给出合适的解决方案,使用zookeeper-3.4.6


    zookeeper-3.4.6 参照下文安装,很顺利就成功了,啃爹的 zookeeper-3.5.0 版本

    zookeeper-3.4.6 安装请参考链接:http://blog.csdn.net/hwwn2009/article/details/40000881

    ZooKeeper介绍请见官网。

    1.环境说明

    在两台装有centos6.4(32位)的服务器上安装ZooKeeper,官网建议至少3个节点,资源有限,本次实验就2台了。

    需要提前安装jdk,选择的版本是jdk-6u27-linux-i586.bin,下载地址:http://pan.baidu.com/s/1mgICcFA

    2.配置主机名和ip映射的关系。

    ZooKeeper集群所有的结点作为一个整体对分布式应用提供服务,因此需要各个节点实现互连,就要知道其他节点的主机和ip的映射关系。在每个节点上配置/etc/hosts文件,添加如下:

    [plain] view plaincopy
     
    1. 192.168.1.67 MasterServer  
    2. 192.168.1.241 SlaveServer  

    3.安装ZooKeeper

    1)下载ZooKeeper,建议选择稳定版,即stable的。

    [plain] view plaincopy
     
    1. wget http://apache.dataguru.cn/zookeeper/stable/zookeeper-3.4.6.tar.gz  

    2)解压

    [plain] view plaincopy
     
    1. tar -zxvf zookeeper-3.4.6.tar.gz  

    3)修改/etc/profile,添加ZooKeeper路径

    [plain] view plaincopy
     
    1. export ZOOKEEPER_HOME=/home/hadooper/hadoop/zookeeper-3.4.6  
    2.   
    3. export PATH=$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf:$PATH  

    4)新建zoo.cfg并修改

    [plain] view plaincopy
     
    1. cp conf/zoo_sample.cfg conf/zoo.cfg   
    [plain] view plaincopy
     
    1. # The number of milliseconds of each tick  
    2. tickTime=2000  
    3. # The number of ticks that the initial   
    4. # synchronization phase can take  
    5. initLimit=10  
    6. # The number of ticks that can pass between   
    7. # sending a request and getting an acknowledgement  
    8. syncLimit=5  
    9. # the directory where the snapshot is stored.  
    10. # do not use /tmp for storage, /tmp here is just   
    11. # example sakes.  
    12. dataDir=/home/hadooper/hadoop/zookeeper-3.4.6/data  
    13. # the port at which the clients will connect  
    14. clientPort=2181  
    15. # the maximum number of client connections.  
    16. # increase this if you need to handle more clients  
    17. #maxClientCnxns=60  
    18. #  
    19. # Be sure to read the maintenance section of the   
    20. # administrator guide before turning on autopurge.  
    21. #  
    22. # http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance  
    23. #  
    24. # The number of snapshots to retain in dataDir  
    25. #autopurge.snapRetainCount=3  
    26. # Purge task interval in hours  
    27. # Set to "0" to disable auto purge feature  
    28. #autopurge.purgeInterval=1  
    29. server.1=MasterServer:2888:3888  
    30. server.2=SlaveServer:2888:3888   

    参数说明:

    ①tickTime:心跳时间,毫秒为单位。

    ②initLimit:这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。

    ③syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 5*2000=10 秒。

    ④dataDir:存储内存中数据库快照的位置。

    ⑤clientPort:监听客户端连接的端口

    ⑥server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。

    5)dataDir目录下创建myid文件,将内容设置为上⑥中的A值,用来标识不同的服务器。

    4.远程复制安装文件

    注:记得修改各节点的myid。

    [plain] view plaincopy
     
    1. scp -r zookeeper-3.3.4/ hadooper@SlaveServer:/home/hadooper/hadoop/    

    转载请注明:http://blog.csdn.net/hwwn2009/article/details/40000881

    ZOOM 云视频会议网站:http://www.zoomonline.cn/

  • 相关阅读:
    OData – Query to Expression
    ASP.NET Core Library – Hangfire
    ASP.NET Core Library – Nager.PublicSuffix
    EF Core – Unit of Work, DbContext, Transaction 概念解释
    ASP.NET Core – Program.cs and Startup.cs 小笔记
    OData – OData vs GraphQL
    Fluent Builder 模式
    C# – 冷知识 (新手)
    ASP.NET Core Library – scriban (Template Engine)
    The "蛋炒饭" in microsoft must cost you ten yuan RMB!
  • 原文地址:https://www.cnblogs.com/gw811/p/4617338.html
Copyright © 2020-2023  润新知