MySQL MEB常见用法

1. 备份成镜像

    备份：

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-image=/images/20161008.mbi --backup-dir=/tmp/backup  backup-to-image

    其中，backup-dir是用来存储临时文件的。该目录下的文件可以直接删除掉。每次备份只需要备份这个镜像文件即可。

    /images目录本身必须存在。

    如果备份的是镜像，则首先必须把镜像恢复到备份目录中

./mysqlbackup --backup-image=/images/20161008.mbi --backup-dir=/backup image-to-backup-dir

   应用日志

./mysqlbackup --backup-dir=/backup apply-log

   恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --backup-dir=/backup/ copy-back   

2. 压缩备份

   备份

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --compress --compress-level=9 backup

   应用日志

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --uncompress apply-log

   恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --backup-dir=/backup/ copy-back

3. 基于库的复制

   非innodb表的复制

   mysqlbackup中提供了这样一个参数--databases，很多人会想当然的以为这个就是用来实现基于库的复制，但实际上并不是，首先看看--help中的说明

--databases=LIST
              This option is used to filter the list of non-innodb
              tables that needs to be backed up. To filter innodb tables,
              use --include option.
              The argument specifies space separated list of database/table
              names of the following form:
                   "db_name[.table_name] db_name1[.table_name1] ...".
              If this option is not specified all databases will be 
              backed up. Also, if the specified database does not match
              with any single database/table, then all databases will be
              backed up.

  意思--database只是用来备份非innodb表的，支持两种方式的写法，--databases=test和--databases=test.test1。

  令人意外的是，如果指定了test库进行复制，则其它所有的非innodb库都不会复制，譬如，mysql库中的user表，performance_schema库。

  而且，上述说明中还提到了“if the specified database does not match with any single database/table, then all databases will be backed up.”，意思是如果指定的数据库或表实际上不存在，则所有的非innodb表都会备份。但实际测试的恰恰相反，如果指定的不存在，则其它所有的非innodb表都不会被复制。

  所以，--databases这种场景基本上可以忽略，因为对于非innodb表来说，可以直接copy，无需用这种方式来备份，而且，指定了特定表，而没有指定mysql库的话，即便执行了恢复操作，也无法启动数据库。如果要复制多个非innodb表，可使用：--databases='test.test mysql'

  innodb表的复制

  下面重点看一下innodb表的复制，这个涉及到--include参数

  --include=REGEXP  
              Backup only those per-table innodb data files which match 
              the regular expression (REGEXP). For each table with a 
              per-table data file, a string of the form db_name.table_name
              is checked against the regular expression (REGEXP). If the 
              REGEXP matches db_name.table_name, the table is included. 
              The REGEXP should be of POSIX 1003.2 'extended' form. 

   可以看出--include参数是用正则表达式来匹配的。

   譬如下面备份语句，只备份db1库和test库

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --include='(db1|test)..*' backup

   我这是只备份了db1库和test库。

   但是这种备份方式有点问题，这个在恢复的时候会体现出来。

   1. 没有备份mysql库中的几张innodb表。

   2. 备份了所有表的frm文件，包括没有备份的innodb表，这样，在恢复的时候会报如下错误，因为只有frm文件，而没有ibd文件。虽然并没有影响数据库的正常启动，但终究不太好。

2016-09-28 10:05:16 1989 [ERROR] InnoDB: Failed to find tablespace for table '"test1"."test1"' in the cache. Attempting to load the t
ablespace with space id 25.2016-09-28 10:05:16 7fc1ac33e700  InnoDB: Operating system error number 2 in a file operation.
InnoDB: The error means the system cannot find the path specified.
2016-09-28 10:05:16 1989 [ERROR] InnoDB: Could not find a valid tablespace file for 'test1/test1'. See http://dev.mysql.com/doc/refma
n/5.6/en/innodb-troubleshooting-datadict.html for how to resolve the issue.2016-09-28 10:05:16 7fc1ac33e700 InnoDB: cannot calculate statistics for table "test1"."test1" because the .ibd file is missing. For 
help, please refer to http://dev.mysql.com/doc/refman/5.6/en/innodb-troubleshooting.html

   所以，在这种备份方式下，需人为的删除这些表的frm文件。

   官方文档中其实还提到了两个参数：--only-innodb和 --only-innodb-with-frm。

   如果指定了--only-innodb参数，则只会备份指定表的ibd文件，不会备份指定备份的innodb表的frm文件和任何非innodb表（包括mysql和performance_schema）

   如果指定了--only-innodb-with-frm参数，则会备份指定表的ibd文件和frm文件，但是不会备份非innodb表。

   个人感觉，这两个参数还是比较鸡肋，如果要实现innodb表的复制，只能指定--include参数，然后人为删除不需要的frm文件。

4. 利用可传输表空间基于部分库的复制

   复制

 ./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --include='db1.t1' --use-tts backup

   在该例中，只备份了一张表db1.t1,也可以备份多张表或库

  应用日志

./mysqlbackup --backup-dir=/backup/ apply-log

  恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup/ copy-back

  但是，报如下错误 

160929 11:37:35 mysqlbackup: INFO: Importing table: db1.t1.
 mysqlbackup: ERROR: mysql query: 'ALTER TABLE db1.t1 IMPORT TABLESPACE': Internal error: Cannot reset LSNs in table '"db1"."t1"' : Tablespace not found mysqlbackup: ERROR: Failed to import tablespace db1.t1.

mysqlbackup failed with errors!

  查看db1目录下t1各文件的权限

[root@localhost db1]# ll
total 116
-rw-rw---- 1 mysql mysql    65 Sep 29 11:17 db.opt
-rw-r--r-- 1 root  root    371 Sep 29 11:37 t1.cfg
-rw-rw---- 1 mysql mysql  8556 Sep 29 11:37 t1.frm
-rw-r--r-- 1 root  root  98304 Sep 29 11:37 t1.ibd

  发现，其中两个文件的权限是root。

  注意：即便是把备份目录/backup的权限设置为mysql，这两个文件的权限依旧是root

  此时，可修改这两个文件的权限

[root@localhost db1]# chown mysql.mysql *

  在客户端手动import表空间

mysql> alter table db1.t1 import tablespace;
Query OK, 0 rows affected (1.55 sec)

mysql> select * from db1.t1;
+------+
| id   |
+------+
|    1 |
+------+
1 row in set (0.00 sec)

   导入成功。

   注意：基于可传输表空间的部分表或库的复制，无需在新的实例上恢复，可在任意一个online实例上进行，前提是这些实例中待导入的表并不存在。

5. 增量复制

    全量复制

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup backup

   第一次增量复制   

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --incremental --incremental-backup-dir=/increment_backup_1 --incremental-base=dir:/backup backup

   第二次增量复制

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --incremental --incremental-backup-dir=/increment_backup_2 --incremental-base=dir:/increment_backup_1 backup

  基于增量复制的恢复

  首先要应用日志

./mysqlbackup --backup-dir=/backup apply-log

  第一次增量恢复

./mysqlbackup --incremental-backup-dir=/increment_backup_1 --backup-dir=/backup apply-incremental-backup

  第二次增量恢复

./mysqlbackup --incremental-backup-dir=/increment_backup_2 --backup-dir=/backup apply-incremental-backup

  恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --backup-dir=/backup copy-back

 关于增量备份， mysqlbackup支持两种方式的增量备份

 基于数据文件

--incremental --incremental-backup-dir=PATH 
  --start-lsn=LSN | --incremental-base=BACKUP 

 基于redo文件

 --incremental-with-redo-log-only --incremental-backup-dir=PATH 
  --start-lsn=LSN | --incremental-base=BACKUP 

 基于redo文件的备份有个前提，即指定LSN后的redo log没有被覆盖。

 对于基于数据文件的增量备份，除了上述指定--incremental-base的方式外，还可指定--start-lsn，

 start-lsn即是上一个备份集中meta目录下backup_variables.txt文件中end_lsn的值。

6. 其它用法 

验证镜像是否损坏

./mysqlbackup --backup-dir=/image --backup-image=2016_09_27_image validate