阿里云RDS与ECS自建mysql数据库主从同步(GTID方式)

1、GTID的概念
全局事务标识：global transaction identifiers；
GTID是一个事务一一对应，并且全局唯一ID；
一个GTID在一个服务器上只执行一次，避免重复执行导致数据混乱或者主从不一致；
GTID用来代替传统复制方法，不再使用MASTER_LOG_FILE+MASTER_LOG_POS开启复制。而是使用MASTER_AUTO_POSTION=1的方式开始复制；
MySQL-5.6.5开始支持的，MySQL-5.6.10后开始完善；
在传统的slave端，binlog是不用开启的，但是在GTID中slave端的binlog是必须开启的，目的是记录执行过的GTID（强制）。

2、GTID的组成
GTID = source_id:transaction_id
source_id，用于鉴别原服务器，即mysql服务器唯一的的server_uuid，由于GTID会传递到slave，所以也可以理解为源ID。
transaction_id，为当前服务器上已提交事务的一个序列号，通常从1开始自增长的序列，一个数值对应一个事务。
示例：3D598FA47-71CA-11E1-9E88-C80AJ8Y29562:97
前面的一串为服务器的server_uuid，即3D598FA47-71CA-11E1-9E88-C80AJ8Y29562，后面的97为transaction_id

3、GTID的优势
更简单的实现failover，不用以前那样在需要找log_file和log_pos；
更简单的搭建主从复制；
比传统的复制更加安全；
GTID是连续的没有空洞的，保证数据的一致性，零丢失。

4、GTID的工作原理
当一个事务在主库端执行并提交时，产生GTID，一同记录到binlog日志中；
binlog传输到slave,并存储到slave的relaylog后，读取这个GTID的这个值设置gtid_next变量，即告诉Slave，下一个要执行的GTID值；
sql线程从relay log中获取GTID，然后对比slave端的binlog是否有该GTID；
如果有记录，说明该GTID的事务已经执行，slave会忽略；
如果没有记录，slave就会执行该GTID事务，并记录该GTID到自身的binlog，在读取执行事务前会先检查其他session持有该GTID，确保不被重复执行；
在解析过程中会判断是否有主键，如果没有就用二级索引，如果没有就用全部扫描。

配置RDS主库

1、登录 RDS 控制台，选择目标实例。
2、配置RDS数据库账号、密码 (ecstb/ecstb) 和授权数据库rdsdb

配置ESC 从库

修改ECS从库 mysql 配置文件，在[mysqld]最后添加如下
#vi /etc/my.cnf

####RDS to mysql ####
server-id            			=1001                       #不可与RDS主库id相同
port 						    = 3306                    
replicate-do-db			        =rdsdb                       #需要同步的数据库

binlog_format                   = row                        #日志文件格式
log-bin                         = mysql-bin
log-bin-index                   = mysql-bin.index
relay-log                       = relay-log
relay_log_index                 = relay-log.index
slave-skip-errors               = all

gtid_mode                       = on                          #开启gtid模式
enforce_gtid_consistency        = on
log-slave-updates               = 1
sql_mode                        = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

 保存后重启mysql服务
service mysqld restart 

systemctl start mysqld.service

5、配置主从同步
连接RDS主库，查询GTID

进入ECS从库，修改这个信息

mysql> stop slave;
mysql> set global gtid_purged = '533ac4e6-9565-11e8-abb5-7cd30abca02e:1-3099396';

注意：设置gtid_purged值时，gtid_executed值必须为空否则报错，该值清空的方法就是reset  master命令

mysql>reset master; 

. 执行同步

CHANGE MASTER TO MASTER_HOST = 'rm-wz9523l****4ebzbso.mysql.rds.aliyuncs.com', MASTER_USER = 'md***s', MASTER_PASSWORD = 'tJD2****96', MASTER_PORT = 3306, MASTER_AUTO_POSITION = 1, MASTER_RETRY_COUNT = 0, MASTER_HEARTBEAT_PERIOD = 10000;

CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.001646', MASTER_LOG_POS=0; 

start slave;

show slave statusG

 操作完成