• (1.5)mongodb备份恢复,mongodb备份还原,mongodb迁移


    【1】备份恢复

    (1.1)备份恢复工具介绍

    应用场景总结:
    (1)mongoexport/mongoimport:json csv 
    1、异构平台迁移  mysql  <---> mongodb
    2、同平台,跨大版本:mongodb 2  ----> mongodb 3
    (2)mongodump/mongorestore Mongodb 的日常备份恢复时使用,mongodb内部常规运维比较多

    (1.2)备份恢复工具下载

    1、登录官网=》Products=>Community Server

      

    2、Tools=》Mongodb Database Tools

      

    【2】mongoexport/mongoimport 导入导出

    (2.1)导出工具 mongoexport 

    一般是 json 和 csv 格式

    $ mongoexport --help  
    参数说明:
    -h:指明数据库宿主机的IP
    -u:指明数据库的用户名
    -p:指明数据库的密码
    -d:指明数据库的名字
    -c:指明collection的名字
    -f:指明要导出那些列
    -o:指明到要导出的文件名
    -q:指明导出数据的过滤条件
    --authenticationDatabase admin
    
    1.单表备份至json格式
    mongoexport -uroot -proot123 --port 27017 --authenticationDatabase admin -d oldboy -c log -o /mongodb/log.json
    
    注:备份文件的名字可以自定义,默认导出了JSON格式的数据。
    
    2. 单表备份至csv格式
    如果我们需要导出CSV格式的数据,则需要使用----type=csv参数:
    
    mongoexport -uroot -proot123 --port 27017 --authenticationDatabase admin -d test -c log --type=csv -f uid,name,age,date  -o /mongodb/log.csv

    (2.2)导入工具 mongoimport

    一般是 json 和 csv 格式

    $ mongoimport --help
    参数说明:
    -h:指明数据库宿主机的IP
    -u:指明数据库的用户名
    -p:指明数据库的密码
    -d:指明数据库的名字
    -c:指明collection的名字
    -f:指明要导入那些列
    -j, --numInsertionWorkers=<number>  number of insert operations to run concurrently(defaults to 1)
    
    //并行 数据恢复: 1.恢复json格式表数据到log1 mongoimport -uroot -proot123 --port 27017 --authenticationDatabase admin -d oldboy -c log1 /mongodb/log.json
    2.恢复csv格式的文件到log2 上面演示的是导入JSON格式的文件中的内容,如果要导入CSV格式文件中的内容,则需要通过--type参数指定导入格式,具体如下所示: 错误的恢复 注意: (1)csv格式的文件头行,有列名字 mongoimport -uroot -proot123 --port 27017 --authenticationDatabase admin -d oldboy -c log2 --type=csv --headerline --file /mongodb/log.csv (2)csv格式的文件头行,没有列名字 mongoimport -uroot -proot123 --port 27017 --authenticationDatabase admin -d oldboy -c log3 --type=csv -f id,name,age,date --file /mongodb/log.csv --headerline:指明第一行是列名,不需要导入。

    (2.3)异构迁移案例

    mysql   -----> mongodb  
    world数据库下city表进行导出,导入到mongodb
    
    (1)mysql开启安全路径
    vim /etc/my.cnf   --->添加以下配置
    secure-file-priv=/tmp
    
    --重启数据库生效
    /etc/init.d/mysqld restart
    
    (2)导出mysql的city表数据
    source /root/world.sql
    
    select * from world.city into outfile '/tmp/city1.csv' fields terminated by ',';
    
    (3)处理备份文件
    desc world.city
      ID          | int(11)  | NO   | PRI | NULL    | auto_increment |
    | Name        | char(35) | NO   |     |         |                |
    | CountryCode | char(3)  | NO   | MUL |         |                |
    | District    | char(20) | NO   |     |         |                |
    | Population
    
    vim /tmp/city.csv   ----> 添加第一行列名信息
    
    ID,Name,CountryCode,District,Population
    
    (4)在mongodb中导入备份
    mongoimport -uroot -proot123 --port 27017 --authenticationDatabase admin -d world  -c city --type=csv -f ID,Name,CountryCode,District,Population --file  /tmp/city1.csv
    
    use world
    db.city.find({CountryCode:"CHN"});
    
    -------------
    world共100张表,全部迁移到mongodb
    
    select table_name ,group_concat(column_name) from columns where table_schema='world' group by table_name;
    
    select * from world.city into outfile '/tmp/world_city.csv' fields terminated by ',';
    
    select concat("select * from ",table_schema,".",table_name ," into outfile '/tmp/",table_schema,"_",table_name,".csv' fields terminated by ',';")
    from information_schema.tables where table_schema ='world';
    
    导入:
    提示,使用infomation_schema.columns + information_schema.tables
    
    mysql导出csv:
    select * from test_info   
    into outfile '/tmp/test.csv'   
    fields terminated by ','    ------字段间以,号分隔
    optionally enclosed by '"'   ------字段用"号括起
    escaped by '"'           ------字段中使用的转义符为"
    lines terminated by '\r\n';  ------行以\r\n结束
    
    mysql导入csv:
    load data infile '/tmp/test.csv'   
    into table test_info    
    fields terminated by ','  
    optionally enclosed by '"' 
    escaped by '"'   
    lines terminated by '\r\n';
  • 相关阅读:
    仪器仪表远程控制库(C++&C#)
    Opencv(EmguCV)中图像跨度stride的计算公式
    细说 Intelligent Tracking Prevention
    gRPC golang实践记录 Marathon
    golang 常用数据类型转换 Marathon
    如何在 Ubuntu 20.04 上安装 Go Marathon
    python中各数据类型的转换整型/浮点型/str型/char型/list型/dict型 Marathon
    一文了解protoc的使用 Marathon
    golang时间戳与格式化字符串的相互转化 Marathon
    常见应用的包名
  • 原文地址:https://www.cnblogs.com/gered/p/16225732.html
Copyright © 2020-2023  润新知