• mysql 集群 数据同步


    mysql集群配置在网站负载均衡中是必不可少的;

    首先说下我个人准备的负载均衡方式;

      1、通过nginx方向代理来将服务器压力分散到各个服务器上;

      2、每个服务器中代码逻辑一样;

      3、通过使用redis缓存来保存内存中数据,使用redis同步功能来同步不同服务器内存中的数据;

      4、在通过mysql的集群配置来实现数据库数据同步;

    这里我整理了几种数据同步方式;

    一:主从服务器同步;

      顾名思义:主服务器负责数据的增删改查,从服务器负责同步数据;

      主服务器建立二进制文件;每产生语句变化或磁盘变化写入日至;

      从服务器读主服务二进制日至;将读到的日至转成从服务的relaylog,从服务读取relaylog同步主主服务器;

      主服务器建立授权复制账号;

      从服务器利用账号来监听主服务器;

      步骤:

      1、首先需要至少两台服务器,我这边118.xxx.xxx.1(主),118.xxx.xxx.2(从)两台服务器;两台搭建mysql方式不同,一台安装mysql,和mysql-server;一台通过直接安装mariadb方式;没什么影响;

      2、主服务器修改/etc/my.cnf;    

    复制代码
    #在[mysqld]下添加,建立二进制日至
    #server-id一般用服务器后一位
    server-id=1 log-binary=mysql-bin #监听变化方式,statement语句变化,row行变化,mixed智能选择 binlog-format=mixed
    复制代码

      关于binlog-format的参数statement/row

      当影响一行如更新一行、插入一行、删除一行时使用row比较合理

      当更新插入删除多行时使用statement比较合理

      mixed是mysql根据条件自动选择使用哪一个参数

      3、从服务器修改/etc/my.cnf

    #[mysqld]下添加relay-log

    #server-id一般用服务器后一位
    server-id=2
    relay-log=mysql-relay

      4、重启两台服务器mysql 服务

    //1
    systemctl restart mysql
    
    //2
    systemctl restart mariadb

      5、主服务建立授权账号replication client,replication slave账号允许服务二进制日至

    grant replication client,replication slave on *.* to 'repl1'@'118.xxx.xxx.2' identified by 'password';

      注意这里账号的权限只能填*.*;否则会报如下错误

    ERROR 1221 (HY000): Incorrect usage of DB GRANT and GLOBAL PRIVILEGES

      6、从服务通过账号链接主服务器

    复制代码
    #进入mysql,清除从库中的同步复制信息;
    reset slave;

    #改变同步主机的信息
    change master to
    master_host='118.xxx.xxx.1',
    master_user='repl1',
    master_password='password',
    master_log_file='mysql-bin.000003',
    master_log_pos=543;
    复制代码

      主服务器二进制日至在/var/lib/mysql中

      在主服务器中show master status;查看主服务日至状态;file目前使用的日志文件;position目前使用的日志文件中的位置;开始从这个位置往后同步;

      7、查看从服务同步信息状态,并启动;

    show slave status G

      参数详解:

        slave_io_state:线程正在试图链接到主服务器的状态;

        master_host:主服务器ip地址

        master_user:被用于链接的当前用户

        master_port:当前的连接主服务器接口

         Connect_Retry:--master-connect-retry选项的当前值

         

         Master_Log_File:sql线程当前正在读取和执行的中继日志文件名称

      

         Read_Master_Log_Pos:当前中继日至中,sql线程已经读取和执行的位置

     

         Slave_IO_Running:io线程是否被启动并成功连接上主服务

     

    //启动同步
    start slave;

      7、查看启动后的状态waiting for master to send event 表示正常;

    错误:

    The server is not configured as slave; fix in config file or with CHANGE MASTER TO

    这表示server-id 错误;将server-id 正确写在[mysqld]下的位置;

    Failed to open the relay log './mariadb-relay-bin.000001' (relay_log_pos 4)

    没有找到relay-bin.000001日至;因为修改前没有清除原有的配置;

    解决方案:reset slave;后在change master to ....;

     

     

    一:主主服务器同步;

       主主服务器mysql同时两台服务器同时监听对方服务器mysql变化;当有一台服务器中数据有变化,另一台实时同步;

      主从服务器同时建立二进制文件;每产生语句变化或磁盘变化写入日至;

      主从服务器同时读另一台服务二进制日至;将读到的日至转成本身服务的relaylog,然后读区本服务器的relaylog同步数据;

      两台服务器建立授权复制账号;

      两台服务器利用账号来监听另一台服务器;

      1、两台服务器my.cnf中配置

    //服务器1
    server-id=163 log-bin=mysql-bin binlog-format=mixed relay-log=mysql-relay
    //服务器2
    server-id=244
    log-bin=mysql-bin
    binlog-format=mixed
    relay-log=mysql-relay

      2、两台服务器都建立授权监听账号

      

    grant replication client,replication slave on *.* to 'repl163'@'118.xxx.xxx.1' identified by 'code@password';
    grant replication client,replication slave on *.* to 'repl163'@'118.xxx.xxx.2' identified by 'code@password';

      3、两台服务器都监听对方log日至

    change master to master_host='118.xxx.xxx.1',master_user='repl163',master_password='password',master_log_file='mysql-bin.000001',master_log_pos=746;
    change master to master_host='118.xxx.xxx.2',master_user='repl163',master_password='password',master_log_file='mysql-bin.000001',master_log_pos=746;

      4、通过show slave status G查看监听状态

      错误:Last_IO_Error: error connecting to master 'repl163@118.xxx.xxx.1:3306' - retry-time: 60  retries: 2

      表示连接出错,检查得知为ip写错了;

      ERROR 1198 (HY000): This operation cannot be performed with a running slave; run STOP SLAVE first

      表示在没有解锁的情况下停止slave进程:需要clear slave;

      然后再执行change master to...

      5、show slave status G没有问题后启动;  

    start slave

    三:mysql-proxy实现负载均衡和读写分离

    //install
    yum install mysql-proxy
    //101.xxx.xxx.1代理mysql端口4040;没有守护进程
    mysql-proxy -P 101.xxx.xxx.1:4040 --proxy-backend-addresses=101.xxx.xxx.1:3306 --proxy-backend-addresses=101.xxx.xxx.2:3306
    //读写分离写法,守护进程启动
    mysql-proxy -b 101.xxx.xxx.1:3306 -r 101.xxx.xxx.1:3306 -s /usr/local/mysql-proxy/share/doc/mysql-proxy/rw-splitting.lua --daemon
  • 相关阅读:
    Linux 为linux enterprises 6安装图形桌面教程
    loadrunner 结果分析-loadrunner结果分析
    python 全栈开发,Day91(Vue实例的生命周期,组件间通信之中央事件总线bus,Vue Router,vue-cli 工具)
    python 全栈开发,Day90(Vue组件,前端开发工具包)
    python 全栈开发,Day89(sorted面试题,Pycharm配置支持vue语法,Vue基础语法,小清单练习)
    python 全栈开发,Day88(csrf_exempt,ES6 快速入门,Vue)
    python 全栈开发,Day87(ajax登录示例,CSRF跨站请求伪造,Django的中间件,自定义分页)
    python 全栈开发,Day85(Git补充,随机生成图片验证码)
    python 全栈开发,Day84(django请求生命周期,FBV和CBV,ORM拾遗,Git)
    python 全栈开发,Day83(博客系统子评论,后台管理,富文本编辑器kindeditor,bs4模块)
  • 原文地址:https://www.cnblogs.com/liliuguang/p/9506459.html
Copyright © 2020-2023  润新知