• zookeeper入门及使用(一)- 安装及操作


    zookeeper是什么?

    highly reliable distributed coordination,用来做高可靠的分布式协调者,可用来:

    • 业务发现(service discovery)找到分布式系统中存在那些可用的服务和节点
    • 名字服务 (name service)通过给定的名字知道到对应的资源
    • 配置管理 (configuration management)如何在分布式的节点中共享配置文件,保证一致性。
    • 故障发现和故障转移 (failure detection and failover)当某一个节点出故障的时候,如何检测到并通知其它节点, 或者把想用的服务转移到其它的可用节点
    • 领导选举(leader election)如何在众多的节点中选举一个领导者,来协调所有的节点
    • 分布式的锁 (distributed exclusive lock)如何通过锁在分布式的服务中进行同步
    • 消息和通知服务 (message queue and notification)如何在分布式的服务中传递消息,以通知的形式对事件作出主动的响应

    zk快速启动

    1. 下载官方版本:zookeeper-3.4.10.jar
    2. 解压到/usr/locak/zookeeper
    3. 配置文件,这里用单机来搭三个节点,生产时得分布在不同机器
    4. 集群模式配置文件
    [root@c7bit1 conf]# cat zk2181.conf
    dataDir=/data/zookeeper/data2181
    clientPort=2181
    tickTime=2000
    initLimit=5
    syncLimit=2
    server.1=127.0.0.1:2820:3820
    server.2=127.0.0.1:2830:3830
    server.3=127.0.0.1:2840:3840
    
    
    [root@c7bit1 conf]# cat zk2182.conf
    dataDir=/data/zookeeper/data2182
    clientPort=2182
    tickTime=2000
    initLimit=5
    syncLimit=2
    server.1=127.0.0.1:2820:3820
    server.2=127.0.0.1:2830:3830
    server.3=127.0.0.1:2840:3840
    
    
    [root@c7bit1 conf]# cat zk2183.conf
    dataDir=/data/zookeeper/data2183
    clientPort=2183
    tickTime=2000
    initLimit=5
    syncLimit=2
    server.1=127.0.0.1:2820:3820
    server.2=127.0.0.1:2830:3830
    server.3=127.0.0.1:2840:3840
    

    5.配置参数介绍

    dataDir:Zookeeper 保存数据的目录,默认情况下,Zookeeper 将写数据的日志文件也保存在这个目录里

    clientPort:这个端口就是客户端连接 Zookeeper 服务器的端口,Zookeeper 会监听这个端口,接受客户端的访问请求。

    tickTime: Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个 tickTime 时间就会发送一个心跳。

    initLimit:这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper 服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 5*2000=10 秒

    syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 2*2000=4 秒

    server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。

    除了修改 zoo.cfg 配置文件,集群模式下还要配置一个文件 myid,这个文件在 dataDir 目录下,这个文件里面就有一个数据就是 A 的值,Zookeeper 启动时会读取这个文件,拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是那个 server。

    6.启动zk

    [root@c7bit1 bin]# cd /usr/local/zookeeper/bin/
    [root@c7bit1 bin]# ./zkServer.sh start /data/zookeeper/conf/zk2181.conf
    ZooKeeper JMX enabled by default
    Using config: /data/zookeeper/conf/zk2181.conf
    Starting zookeeper ... STARTED
    
    同理启动另外两个节点:
    ./zkServer.sh start /data/zookeeper/conf/zk2182.conf
    ./zkServer.sh start /data/zookeeper/conf/zk2183.conf
    

    7.基本命令使用

    ZooKeeper -server host:port cmd args
    如:
    ./zkCli.sh -server 127.0.0.1:2181,127.0.0.1:2182,127.0.0.1:2183 ls /
    当然也可以只联接单个server,如:
    ./zkCli.sh -server 127.0.0.1:2181 
    
    后面如果不加命令,则进入交互模式。
    [zk: 127.0.0.1:2181(CONNECTED) 0] help
    ZooKeeper -server host:port cmd args
    	stat path [watch]
    	set path data [version]
    	ls path [watch]
    	delquota [-n|-b] path
    	ls2 path [watch]
    	setAcl path acl
    	setquota -n|-b val path
    	history 
    	redo cmdno
    	printwatches on|off
    	delete path [version]
    	sync path
    	listquota path
    	rmr path
    	get path [watch]
    	create [-s] [-e] path data acl
    	addauth scheme auth
    	quit 
    	getAcl path
    	close 
    	connect host:port
    
    创建一个新节点
    [zk: 127.0.0.1:2181(CONNECTED) 20] create /name "abc"   
    Created /name
    
    列出节点
    [zk: 127.0.0.1:2181(CONNECTED) 23] ls /
    [name, zookeeper]
    
    获取一个节点的值
    [zk: 127.0.0.1:2181(CONNECTED) 21] get /name
    abc
    cZxid = 0x60000001c
    ctime = Thu Nov 29 21:33:31 CST 2018
    mZxid = 0x60000001c
    mtime = Thu Nov 29 21:33:31 CST 2018
    pZxid = 0x60000001c
    cversion = 0
    dataVersion = 0
    aclVersion = 0
    ephemeralOwner = 0x0
    dataLength = 3
    numChildren = 0
    
    设置节点的值
    [zk: 127.0.0.1:2181(CONNECTED) 24] set /name '123'
    cZxid = 0x60000001c
    ctime = Thu Nov 29 21:33:31 CST 2018
    mZxid = 0x60000001d
    mtime = Thu Nov 29 21:34:51 CST 2018
    pZxid = 0x60000001c
    cversion = 0
    dataVersion = 1
    aclVersion = 0
    ephemeralOwner = 0x0
    dataLength = 3
    numChildren = 0
    
    删除节点
    [zk: 127.0.0.1:2181(CONNECTED) 26] delete /name
    [zk: 127.0.0.1:2181(CONNECTED) 27] ls /
    [zookeeper]
    

    如果是远程shell操作,可以下载zookeepercli-1.0.10-1.x86_64.rpm
    下载地址:https://github.com/outbrain/zookeepercli
    使用和上面的基本一致

    [root@c7bit1 conf]# rpm -ivh zookeepercli-1.0.10-1.x86_64.rpm
    [root@c7bit1 conf]# zookeepercli --help
    Usage of zookeepercli:
      -acls="31": optional, csv list [1|,2|,4|,8|,16|,31]
      -auth_pwd="": optional, digest scheme, pwd
      -auth_usr="": optional, digest scheme, user
      -c="": command, required (exists|get|ls|lsr|create|creater|set|delete|rm|deleter|rmr|getacl|setacl)
      -debug=false: debug mode (very verbose)
      -force=false: force operation
      -format="txt": output format (txt|json)
      -servers="": srv1[:port1][,srv2[:port2]...]
      -stack=false: add stack trace upon error
      -verbose=false: verbose
    [root@c7bit1 bin]# zookeepercli -servers 127.0.0.1:2181 -c ls /
    zookeeper
    
  • 相关阅读:
    在Bootstrap开发框架基础上增加WebApi+Vue&Element的前端
    使用Vue-TreeSelect组件的时候,用watch变量方式解决弹出编辑对话框界面无法触发更新的问题
    使用Vue-TreeSelect组件实现公司-部门-人员级联下拉列表的处理
    利用查询条件对象,在Asp.net Web API中实现对业务数据的分页查询处理
    利用过滤器Filter和特性Attribute实现对Web API返回结果的封装和统一异常处理
    使用代码生成工具快速开发ABP框架项目
    基于ABP框架的SignalR,使用Winform程序进行功能测试
    使用egg.js开发后端API接口系统
    小样本学习领域的几篇优秀文章解读——都是度量学习
    用于对机器学习模型进行对抗性攻击、防御和基准测试的Python库:CleverHans 3.0.0
  • 原文地址:https://www.cnblogs.com/zejin2008/p/10042704.html
Copyright © 2020-2023  润新知