• ZooKeeper一二事


    集群真是好好玩,最近一段时间天天搞集群,redis缓存服务集群啦,solr搜索服务集群啦,,,巴拉巴拉

    今天说说zookeeper,之前搭建了一个redis集群,用了6台机子,有些朋友电脑跑步起来,有点卡,那这里主要说说伪分布式的集群,正式版的集群需要3台机子,我就一带而过说一说,搭建起来也是非常简单的

    先来说说Zookeeper

    什么是Zookeeper呢,顾名思义,动物园管理员嘛,什么hadoop大象啦,hive蜜蜂啦,pig小猪啦,都是用这货来管的,就是大数据Hadoop里面的嘛~

    (题外话:知道孙越嘛,就是说相声捧哏那位,岳云鹏的搭档,哈哈哈,散养,说笑了)

    主要用法

    1、集群管理

    提供主从的管理、负载均衡、实现高可用(HA)管理;

    集群的代理层面,作为入口(redis集群搭建是不需要zk,就没有入口这一说法,redis-cli随便访问那个IP就行)

    Zookeeper必须是集群才能保证高可用Zookeeper有选举和投票的机制。集群中至少应该有三个节点。为啥是3个节点呢,如果有一台机子宕机了,机制是选取一半以上的,如果是两台,那么就不行了,所以至少3台

    2、对文件进行集中管理,进行统一配置

    举个栗子:solr集群搭建的时候,需要把Solr的配置文件上传到zk,让zk来统一管理,每个节点都到zk上取配置文件(后面的文章会将一下solr集群的搭建)

    3、分布式锁 (hadoop处理大数据的时候需要用到,一般集群中不需要用到,就不细说了)

    集群需要的服务器

    Zookeeper:3台(伪分布式1台即可)

    如下图,第一台作为伪分布式,下面3台作为正式的集群

    集群搭建步骤:

    1、安装jdk,这个必须要安装,zk是hadoop的,都是基于jdk的,用jdk7

    2、zookeeper的安装包上传到服务器

    解压

    创建文件夹

    把解压的复制到这个文件夹下

    (集群中只要复制一份就行了)

    创建数据文件,并且创建myid,写入1(zk02对应“2”,zk03对应“3”)

    (集群中也是如此)

    进入conf文件,把zoo_sample.cfg复制并且文件改名为zoo.cfg

    修改zoo.cfg,把dataDir=属性指定为刚创建的data文件夹

    修改端口(伪分布式由于相同IP,必须更改,集群不需要)

    配置好后就可以启动了

    Zookeeper下有一个bin,zkServer.sh启动zookeeper

    这是伪分布式下的3个节点,其中一个主,2个从

    集群中同样如此,1个主,2个从,OK,配置完毕,明天咱们讲讲solr集群 的搭建,好好玩的搜索服务噢~

    (微信公众号:wxleechenxiang)

  • 相关阅读:
    分布式设计与开发(一)------宏观概述
    分布式设计与开发(二)------几种必须了解的分布式算法
    分布式设计与开发(三)------高一致性服务ZooKeeper
    jvm工作原理
    JVM原理和优化
    分布式系统设计原理与方案
    在Linux上安装Memcached服务
    使用Memcached、Spring AOP构建数据库前端缓存框架
    Java使用memcached
    Memcache的部署和使用
  • 原文地址:https://www.cnblogs.com/leechenxiang/p/5449781.html
Copyright © 2020-2023  润新知