• 【DB宝50】Oracle异构平台迁移之完全可传输导出导入(Full Transportable Export & Import)


    一、简介

    完全可传输导出导入(Full Transportable Export & Import)可以认为是TTS的一个升级版,如下所示:

    官网:

    https://docs.oracle.com/en/database/oracle/oracle-database/21/upgrd/transporting-upgrading-database-full-transportable-export-import.html#GUID-E5765990-0A20-4AAC-8AFC-1930B929A172

    1.1、使用场景

    完全可传输导出/导入功能可以让数据库迁移更快、更容易,比exp更有效,可用于多种情形:
    版本升级至新发行版Oracle DB:可以使用完全可传输导出/导入功能将数据库从11.2.0.3或更高版本升级至Oracle Database 12c。要执行上述升级操作,请安装Oracle Database 12c并创建一个空数据库。接着,使用完全可传输导出/导入功能将11.2.0.3数据库移动到Oracle Database 12c数据库。
    将数据库移动到新计算机系统:可以使用完全可传输导出/导入功能将数据库从一个计算机系统移动到另一个计算机系统。您可能想要将数据库移动到新计算机系统以升级硬件,或将数据库移动到其他平台上。
    将非CDB移动到非CDB或CDB:移动到CDB后,移动的数据库将成为与CDB关联的PDB。完全可传输导出/导入功能可以高效地将11.2.0.3或更高版本的数据库移动到Oracle Database 12c数据库。

    1.2、限制条件

    执行完全可传输导出时有以下限制:
    •如果要导出的数据库包含加密表空间或具有加密列(透明数据加密(TDE)列或SecureFile LOB列)的表,则还必须提供ENCRYPTION_PASSWORD参数。
    •如果源数据库中含有加密表空间,则源数据库和目标数据库必须位于具有相同字节排列顺序(endianness)的平台上。
    •如果源平台和目标平台的字节排列顺序(endianness)不同,则必须转换要移动的数据,使其格式与目标平台的格式相同。使用DBMS_FILE_TRANSFER程序包或RMAN CONVERT命令。
    •完全可传输导出无法重新启动。
    •具有存储且已选定要导出的所有对象中的所有存储段,必须完全位于不可移动的管理表空间(SYSTEM/SYSAUX)中或完全位于用户定义的可移动表空间中。单个对象的存储不能跨越这两种表空间。
    •使用完全可传输导出通过网络移动数据库时,含有LONG或LONG RAW列且位于管理表空间(例如SYSTEM或SYSAUX)中的表不受支持。
    •使用完全可传输导出通过网络移动数据库时,如果审计线索信息本身存储在用户定义的表空间中,则无法为存储在管理表空间(例如SYSTEM和SYSAUX)中的表启用审计。
    •如果源数据库和目标数据库都运行Oracle Database 12c发行版1(12.1),则必须至少将Oracle数据泵VERSION参数设置为12.0或将COMPATIBLE数据库初始化参数设置为12.0或更高版本,才能执行完全可传输导出。
    •从11.2.0.3源数据库开始才支持完全可传输导出。完全可传输导出功能用于11.2.0.3或更高版本的数据库,完全可传输导入功能用于Oracle 12c数据库。

    执行完全可传输导入时有以下要求:

    •如果您使用的是网络链接,则在NETWORK_LINK参数中指定的数据库必须为Oracle Database 11g发行版2(11.2.0.3)或更高版本,且Oracle数据泵VERSION参数必须至少设置为12。(在非网络导入中,会从转储文件隐式确定VERSION=12。)

    •如果源平台和目标平台的endian格式不同,则必须转换要移动的数据,使其格式与目标平台的格式相同。可使用DBMS_FILE_TRANSFER程序包或RMAN CONVERT命令转换数据。

    •如果源平台和目标平台的endian格式不同,则在网络模式或转储文件模式下不支持对加密表空间进行完全可传输导入。

    •使用完全可传输导入功能通过网络移动数据库时,含有LONG或LONG RAW列且位于管理表空间(例如SYSTEM或SYSAUX)中的表不受支持。

    •使用完全可传输导入功能通过网络移动数据库时,如果审计线索信息本身存储在用户定义的表空间中,则无法为存储在管理表空间(例如SYSTEM和SYSAUX)中的表启用审计。

    • 目标库字符集需要和源库保持一致。

    二、完全可传输操作步骤

    要执行完全可传输操作,请执行下列步骤:
    1.在导出之前,将数据库中的所有用户定义的表空间置于只读状态,排除SYSTEM、SYSAUX、TEMP和Undo表空间。

    2.以具有DATAPUMP_EXP_FULL_DATABASE角色的用户身份调用Oracle数据泵导出实用程序,并指定完全可传输导出选项:FULL=Y、TRANSPORTABLE=ALWAYS。LOGFILE参数很重要,因为它将包含导入操作需要移动的数据文件的列表。要在11.2.0.3数据库上执行该操作,请使用VERSION参数。只有Oracle Database 12c数据库才支持完全可传输导入。

    3.将导出的转储文件拷贝到目标端。

    4.将相关只读表空间的数据文件拷贝到目标端。

    5.(可选)转换文件的字节序。如果要将数据库移动到与源平台不同的平台中,则请确定源平台和目标平台是否都支持跨平台数据库移动。如果两个平台的endian格式相同,则不必进行转换。否则,必须使用DBMS_FILE_TRANSFER或RMAN CONVERT命令转换源平台或目标平台中数据库内的每个表空间。

    6.将源表空间置于读写状态。

    7.以具有DATAPUMP_IMP_FULL_DATABASE角色的用户身份调用Oracle数据泵导入实用程序,并指定完全可传输导入选项:FULL=Y、TRANSPORT_DATAFILES。

    三、案例演示

    需求:将11.2.0.3中的表空间ts_lhr、users、example,迁移到12.1.0.2的CDB数据库的lhrpdb1中作为一个PDB存在。

    3.1、环境

    源库 目标库
    版本 11.2.0.3 12.1.0.2
    ORACLE_SID LHR11G lhrcdb1
    用户表空间 ts_lhr、users、example ts_lhr、users、example
    平台 Linux x86 64-bit Linux x86 64-bit
    字节序 Little Little
    IP地址 172.17.0.3 172.17.0.15
    字符集 AMERICAN_CHINA.AL32UTF8 AMERICAN_CHINA.AL32UTF8
    -- 查询平台和字节序
    SELECT d.PLATFORM_NAME, ENDIAN_FORMAT
         FROM V$TRANSPORTABLE_PLATFORM tp, V$DATABASE d
         WHERE tp.PLATFORM_NAME = d.PLATFORM_NAME;
         
    -- 查询字符集
    select userenv('language') from dual;
    

    3.2、源库操作

    3.2.1、将需要传输的用户表空间设置为RO状态

    将除'SYSTEM','SYSAUX','UNDOTBS1','TEMP'之外的表空间都设置为read only模式:

    select 'ALTER TABLESPACE '||name||' READ ONLY;' exec_sql
    from v$tablespace 
    where NAME not in ('SYSTEM','SYSAUX','UNDOTBS1','TEMP');
    
    select tablespace_name,status from dba_tablespaces;
    

    执行过程:

    SYS@LHR11G> create table lhr.test tablespace ts_lhr as select * from dba_tables;
    
    Table created.
    
    
    SYS@LHR11G> select count(*) from  lhr.test;
    
      COUNT(*)
    ----------
          2835
    
    SYS@LHR11G> select 'ALTER TABLESPACE '||name||' READ ONLY;' exec_sql
      2  from v$tablespace 
      3  where NAME not in ('SYSTEM','SYSAUX','UNDOTBS1','TEMP');
    
    EXEC_SQL
    --------------------------------------------------------------------------------------------------------------------
    ALTER TABLESPACE USERS READ ONLY;
    ALTER TABLESPACE EXAMPLE READ ONLY;
    ALTER TABLESPACE TS_LHR READ ONLY;
    
    SYS@LHR11G> ALTER TABLESPACE USERS READ ONLY;
    
    Tablespace altered.
    
    SYS@LHR11G> ALTER TABLESPACE EXAMPLE READ ONLY;
    
    Tablespace altered.
    
    SYS@LHR11G> ALTER TABLESPACE TS_LHR READ ONLY;
    
    Tablespace altered.
    
    SYS@LHR11G> select tablespace_name,status from dba_tablespaces;
    
    TABLESPACE_NAME                                              STATUS
    ------------------------------------------------------------ ------------------
    SYSTEM                                                       ONLINE
    SYSAUX                                                       ONLINE
    UNDOTBS1                                                     ONLINE
    TEMP                                                         ONLINE
    USERS                                                        READ ONLY
    EXAMPLE                                                      READ ONLY
    TS_LHR                                                       READ ONLY
    
    7 rows selected.
    
    SYS@LHR11G> select DIRECTORY_PATH from dba_directories where DIRECTORY_NAME='DATA_PUMP_DIR';
    
    DIRECTORY_PATH
    ---------------------------------------
    /u01/app/oracle/admin/LHR11G/dpdump/
    

    3.2.2、使用Data Pump导出工具执行full transportable export操作

    -- 在执行导出时必须指定transportable=always,它用来判断是否使用传输选项。full参数用来指定将导出整个数据库
    expdp system/lhr dumpfile=expdp_lhr_`date +%Y%m%d`.dmp directory=DATA_PUMP_DIR 
    transportable=always full=y EXCLUDE=STATISTICS  PARALLEL=4 version=12 logfile=expdp_lhr_`date +%Y%m%d`.log
    
    -- 或者可以将不需要的内容排除掉
    cat > /tmp/exclude_schema.par <<"EOF"
    transportable=always
    full=y
    PARALLEL=4
    version=12
    EXCLUDE=STATISTICS,SCHEMA:"in ('MDSYS','DBSNMP','SCOTT','WMSYS','SH','HR','BI','OE','IX','SYSMAN','XDB','OUTLN','MGMT_VIEW','FLOWS_FILES','ORDSYS','EXFSYS','APPQOSSYS','APEX_030200','OWBSYS_AUDIT','ORDDATA','CTXSYS','ANONYMOUS','ORDPLUGINS','OWBSYS','SI_INFORMTN_SCHEMA','OLAPSYS','ORACLE_OCM','XS$NULL','PM','MDDATA','DIP','APEX_PUBLIC_USER','SPATIAL_CSW_ADMIN_USR','SPATIAL_WFS_ADMIN_USR')"
    EOF
    
    
    expdp system/lhr dumpfile=expdp_lhr_`date +%Y%m%d`.dmp directory=DATA_PUMP_DIR 
    parfile=/tmp/exclude_schema.par logfile=expdp_lhr_`date +%Y%m%d`.log
    

    执行过程:

    
    [oracle@lhrora11203 ~]$ expdp system/lhr dumpfile=expdp_lhr.dmp directory=DATA_PUMP_DIR transportable=always EXCLUDE=STATISTICS full=y version=12 logfile=expdp_lhr.log
    
    Export: Release 11.2.0.3.0 - Production on Thu Apr 8 10:03:26 2021
    
    Copyright (c) 1982, 2011, Oracle and/or its affiliates.  All rights reserved.
    
    Connected to: Oracle Database 11g Enterprise Edition Release 11.2.0.3.0 - 64bit Production
    With the Partitioning, OLAP, Data Mining and Real Application Testing options
    Starting "SYSTEM"."SYS_EXPORT_FULL_02":  system/******** dumpfile=expdp_lhr.dmp directory=DATA_PUMP_DIR transportable=always full=y version=12 logfile=expdp_lhr.log 
    Estimate in progress using BLOCKS method...
    Processing object type DATABASE_EXPORT/PLUGTS_FULL/FULL/PLUGTS_TABLESPACE
    Processing object type DATABASE_EXPORT/PLUGTS_FULL/PLUGTS_BLK
    Processing object type DATABASE_EXPORT/EARLY_OPTIONS/TABLE_DATA
    Processing object type DATABASE_EXPORT/EARLY_OPTIONS/VIEWS_AS_TABLES/TABLE_DATA
    Processing object type DATABASE_EXPORT/NORMAL_OPTIONS/TABLE_DATA
    Processing object type DATABASE_EXPORT/NORMAL_OPTIONS/VIEWS_AS_TABLES/TABLE_DATA
    Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE_DATA
    Total estimation using BLOCKS method: 90.06 MB
    Processing object type DATABASE_EXPORT/PRE_SYSTEM_IMPCALLOUT/MARKER
    Processing object type DATABASE_EXPORT/PRE_INSTANCE_IMPCALLOUT/MARKER
    Processing object type DATABASE_EXPORT/TABLESPACE
    。。。。。。。。。。。。
    . . exported "XDB"."XDB$H_INDEX"                         1.177 MB     306 rows
    . . exported "XDB"."XDB$H_LINK"                          811.9 KB    7666 rows
    . . exported "XDB"."XDB$ACL"                             13.64 KB      11 rows
    。。。。。。。。。。。。
    . . exported "SYSTEM"."REPCAT$_TEMPLATE_TARGETS"             0 KB       0 rows
    . . exported "SYSTEM"."REPCAT$_USER_AUTHORIZATIONS"          0 KB       0 rows
    . . exported "SYSTEM"."REPCAT$_USER_PARM_VALUES"             0 KB       0 rows
    . . exported "SYSTEM"."SQLPLUS_PRODUCT_PROFILE"              0 KB       0 rows
    Master table "SYSTEM"."SYS_EXPORT_FULL_02" successfully loaded/unloaded
    ******************************************************************************
    Dump file set for SYSTEM.SYS_EXPORT_FULL_02 is:
      /u01/app/oracle/admin/LHR11G/dpdump/expdp_lhr.dmp
    ******************************************************************************
    Datafiles required for transportable tablespace EXAMPLE:
      /u01/app/oracle/oradata/LHR11G/example01.dbf
    Datafiles required for transportable tablespace TS_LHR:
      /u01/app/oracle/oradata/LHR11G/ts_lhr01.dbf
    Datafiles required for transportable tablespace USERS:
      /u01/app/oracle/oradata/LHR11G/users01.dbf
    Job "SYSTEM"."SYS_EXPORT_FULL_02" successfully completed at 10:14:13
    
    

    3.2.3、将dmp文件和数据文件传输到目的端

    将文件/u01/app/oracle/admin/LHR11G/dpdump/expdp_lhr.dmp、/u01/app/oracle/oradata/LHR11G/example01.dbf、/u01/app/oracle/oradata/LHR11G/ts_lhr01.dbf、/u01/app/oracle/oradata/LHR11G/users01.dbf传输到目的端:

    scp expdp_lhr_20210408.* oracle@172.17.0.15:/u01/app/tts/
    scp /u01/app/oracle/oradata/LHR11G/example01.dbf oracle@172.17.0.15:/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/
    scp /u01/app/oracle/oradata/LHR11G/ts_lhr01.dbf oracle@172.17.0.15:/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/
    scp /u01/app/oracle/oradata/LHR11G/users01.dbf oracle@172.17.0.15:/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/
    

    另外,拷贝数据文件也可以使用dbms_file_transfer包,如下:

    -- 源库执行
    create database link dbl_lhrpdb1
      connect to system identified by "lhr"
     using '(DESCRIPTION =(ADDRESS_LIST =(ADDRESS = (PROTOCOL = TCP)(HOST = 172.17.0.15)(PORT = 1521)) )(CONNECT_DATA =(SERVICE_NAME = lhrpdb1)))';
    
    
    -- 源库执行
    create or replace directory TTS_DATAFILE_SOURCE as '/u01/app/oracle/oradata/LHR11G/';
    grant all on directory TTS_DATAFILE_SOURCE to public;
    
    
    -- 目标库执行
    create or replace directory TTS_DATAFILE_DES as '/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/';
    grant all on directory TTS_DATAFILE_DES to public;
    
    
    --  源库执行,拷贝文件到目标库
    exec dbms_file_transfer.put_file(source_directory_object =>'TTS_DATAFILE_SOURCE',source_file_name => 'example01.dbf',destination_directory_object => 'TTS_DATAFILE_DES',destination_file_name => 'example01.dbf',destination_database => 'dbl_lhrpdb1');
    exec dbms_file_transfer.put_file(source_directory_object =>'TTS_DATAFILE_SOURCE',source_file_name => 'ts_lhr01.dbf',destination_directory_object => 'TTS_DATAFILE_DES',destination_file_name => 'ts_lhr01.dbf',destination_database => 'dbl_lhrpdb1');
    exec dbms_file_transfer.put_file(source_directory_object =>'TTS_DATAFILE_SOURCE',source_file_name => 'users01.dbf',destination_directory_object => 'TTS_DATAFILE_DES',destination_file_name => 'users01.dbf',destination_database => 'dbl_lhrpdb1');
    

    3.2.4、将源数据库中的所有用户表空间设置为读写模式

    select 'ALTER TABLESPACE '||name||' READ WRITE;' exec_sql
    from v$tablespace 
    where NAME not in ('SYSTEM','SYSAUX','UNDOTBS1','TEMP');
    
    select tablespace_name,status from dba_tablespaces;
    

    3.3、目标库操作

    3.3.1、转换字节序(可选)

    若原平台和目标平台的字节序不一样,则还需要进行字节序的转换;若一样,则不需要执行转换。在rman中执行:

    CONVERT DATAFILE 
    '/u01/app/tts/example01.dbf',
    '/u01/app/tts/ts_lhr01.dbf',
    '/u01/app/tts/users01.dbf'
    TO PLATFORM="Linux x86 64-bit"
    FROM PLATFORM="Linux x86 64-bit"
    DB_FILE_NAME_CONVERT='/u01/app/tts/', '/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/'
    PARALLELISM=4;
    

    3.3.2、开始导入

    -- 创建目录
    create or replace directory tts_dump as '/u01/app/tts/';
    grant all on directory tts_dump to public;
    select DIRECTORY_PATH from dba_directories where DIRECTORY_NAME='TTS_DUMP';
    
    
    -- 导入
    impdp system/lhr@localhost/LHRPDB1 dumpfile=expdp_lhr_20210408.dmp directory=tts_dump 
    transport_datafiles='/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/example01.dbf',  
    '/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/ts_lhr01.dbf',  
    '/u01/app/oracle/oradata/lhrcdb1/lhrpdb1/users01.dbf'  
     logfile=import_lhr.log
    

    3.3.3、检查状态

    sqlplus  system/lhr@localhost/LHRPDB1
    col TABLESPACE_NAME format a20
    col FILE_NAME format a100
    select tablespace_name,file_name from dba_data_files;
    select tablespace_name,status from dba_tablespaces;
    

    执行过程:

    SYSTEM@localhost/LHRPDB1> col TABLESPACE_NAME format a20
    SYSTEM@localhost/LHRPDB1> col FILE_NAME format a100
    SYSTEM@localhost/LHRPDB1> select tablespace_name,file_name from dba_data_files;
    
    TABLESPACE_NAME      FILE_NAME
    -------------------- ----------------------------------------------------------------------------------------------------
    SYSTEM               /u01/app/oracle/oradata/lhrcdb1/lhrpdb1/system01.dbf
    SYSAUX               /u01/app/oracle/oradata/lhrcdb1/lhrpdb1/sysaux01.dbf
    USERS                /u01/app/oracle/oradata/lhrcdb1/lhrpdb1/users01.dbf
    EXAMPLE              /u01/app/oracle/oradata/lhrcdb1/lhrpdb1/example01.dbf
    TS_LHR               /u01/app/oracle/oradata/lhrcdb1/lhrpdb1/ts_lhr01.dbf
    
    SYSTEM@localhost/LHRPDB1> select tablespace_name,status from dba_tablespaces;
    
    TABLESPACE_NAME      STATUS
    -------------------- ------------------
    SYSTEM               ONLINE
    SYSAUX               ONLINE
    TEMP                 ONLINE
    USERS                ONLINE
    EXAMPLE              ONLINE
    TS_LHR               ONLINE
    
    6 rows selected.
    
    SYSTEM@localhost/LHRPDB1> select count(*) from  lhr.test;
    
      COUNT(*)
    ----------
          2835
    
    

    四、总结

    1、完全可传输导出导入(Full Transportable Export & Import)可以认为是TTS的一个升级版,步骤基本和TTS一致

    2、完全可传输导出导入的停机时间主要花费在将源库的数据文件拷贝到目标库的过程,所以,正式迁移时可以考虑临时增大带宽

    3、字节序的转换建议在目标端执行

    4、生产库完成迁移后,建议在目标库对整库收集统计信息

    5、导入到PDB的时候,需要注意连接串的写法,确保连接到的是PDB

    About Me


    ● 本文作者:小麦苗,部分内容整理自网络,若有侵权请联系小麦苗删除
    ● 本文原始发表于个人微 信公众号(DB宝)上
    ● QQ群号: 230161599 、618766405,微信群私聊
    ● 个人QQ号(646634621),微 信号(db_bao),注明添加缘由
    ● 版权所有,欢迎分享本文,转载请保留出处

    ............................................................................................

    小麦苗的微店https://weidian.com/s/793741433?wfr=c&ifr=shopdetail

    小麦苗出版的数据库类丛书http://blog.itpub.net/26736162/viewspace-2142121/

    小麦苗OCP、OCM、高可用网络班http://blog.itpub.net/26736162/viewspace-2148098/

    ............................................................................................

    使用微信客户端扫描下面的二维码来关注小麦苗的微信公众号(DB宝),学习最实用的数据库技术。

    小麦苗的微信公众号

  • 相关阅读:
    分数的表示和运算
    用户管理
    DML,DDL
    索引
    sql语句执行顺序
    伪劣
    序列
    视图
    完整性约束
    ASP.NET MVC学习笔记(二)登陆验证
  • 原文地址:https://www.cnblogs.com/lhrbest/p/14730260.html
Copyright © 2020-2023  润新知