• 一键安装zookeeper脚本制作篇 相关经验浅谈


      昨天在群里看到有朋友说起zookeeper的安装问题,在此分享下本人工作中安装zookeeper(下面简称zk)的经验,后面将会介绍一些生产环境中对zk的常见使用方法。

    1.安装包:

      带stable标签的zk tar包,请自行google,解压。

    2.安装注意点:

      zk的安装就三个注意的地方:

      1)。conf下log4j.properties:log4j中路径和策略的指定,生产环境中,所有的日志写入日志存储盘中,所以需要修改此配置文件(ps:修改了也不会生效,还要修改启动脚本,见3);

      2)。conf下zoo.cfg:将zoo.cfg.example重命令为zoo.cfg;文件中的配置请参照其配置说明,并结合实际机器情况进行修改;必须修改的地方:a)。dataDir属性,这个属性用来落地存储zk上数据的和myid的,myid存储的是server的索引号,用来标识启动ip和port;b)。server.x=ip:port1:port2;根据你的实际设计,配置不同的机器IP,或者用hostname代替

      3)。在dataDir指定目录下新建一个myid文件,将本机在zoo.cfg中的配置的server.x的x的值存入myid中,用来寻找进程启动时的绑定IP;

    3.开发人员应该这样去安装zk:

      zk是分布式系统,所以安装起来涉及到多台机器的安装,当然挨个机器配置也行,但是一个好的程序员会用程序来代替人工,所以如果你现在的工作跟业务没有关系,那么将来你的工作就能够被程序代替。

      言归正转,zk的安装首先要将2中除了myid的其它条件都准备好,然后分发文件,剩下的就是写个脚本,修改每台机器的myid。

      脚本如下:  

        #!/bin/bash
        path=zkhost
        i=1
        for t in `cat $path`
        do
          ssh $t "mkdir -p /xxx/zookeeper-3.4.5/data; echo $i > /xxx/zookeeper-3.4.5/data/myid";
          i=$(($i+1));
          echo $i;
        done

      zkhost请按照你zoo.cfg中server.x后面的顺序配置,记住顺序一定要对。

    4.常见问题排查:

      1)。IPV6:经常遇到的一个问题,所有的服务都是正常安装,而且zk服务也启动正常;接下来教你排查zk问题,用netstat -anp |grep 2181;(如果没有修改端口的话):a)。可以查看zk系统的链接是否正常;b)。绑定的IP是否是IPV4,目前Java环境,如果用"0.0.0.0"来绑定服务的话,默认绑定到IPV6上,所以你看到的listen状态为":::2181",显然你用4段的IP死活连不上。

      2)。解决办法:vim zkServer.sh;在start)部分找到“ nohup $JAVA "-Dzookeeper.log.dir=${ZOO_LOG_DIR}"”,给其添加一个选项"-Djava.net.preferIPv4Stack=true",这样启动的时候就会自动绑定IPV4端的IP;hadoop启动时你是否也注意到这个问题了?同时,为了规范日志,需要在脚本头上添加一行ZOO_LOG_DIR="/cache/zk/"即可,具体的日志策略请修改conf/log4j.properties文件。

    5.参考资料:

      本人blog:shell脚本快速入门   linux下网络编程晋级

  • 相关阅读:
    Entity Framework 已有打开的与此 Command 相关联的 DataReader,必须首先将它关闭 异常处理
    MD5加密
    让AutoMapper在你的项目里飞一会儿
    C# SFTP上传与下载
    读取、修改配置文件节点
    C#对数据库的操作(增删改查)
    实现Icommand接口
    wpf创建用户控件(计时器控件)
    用lpeg解析文本语法
    一种简单的客户端更新方案
  • 原文地址:https://www.cnblogs.com/uttu/p/2921698.html
Copyright © 2020-2023  润新知