• Oracle 将数据导出TXT文本(转)


    关于SPOOL(SPOOL是SQLPLUS的命令,不是SQL语法里面的东西。)

    对于SPOOL数据的SQL,最好要自己定义格式,以方便程序直接导入,SQL语句如:
    select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task;

    spool常用的设置
    set colsep' ';    //域输出分隔符
    set echo off;    //显示start启动的脚本中的每个sql命令,缺省为on
    set feedback off;  //回显本次sql命令处理的记录条数,缺省为on
    set heading off;   //输出域标题,缺省为on
    set pagesize 0;   //输出每页行数,缺省为24,为了避免分页,可设定为0。
    set termout off;   //显示脚本中的命令的执行结果,缺省为on
    set trimout on;   //去除标准输出每行的拖尾空格,缺省为off
    set trimspool on;  //去除重定向(spool)输出每行的拖尾空格,缺省为off

    导出文本数据的建议格式:
    SQL*PLUS环境设置SET NEWPAGE NONE 
                    SET HEADING OFF 
                    SET SPACE 0 
                    SET PAGESIZE 0 
                    SET TRIMOUT ON 
                    SET TRIMSPOOL ON 
                    SET LINESIZE 2500

    注:LINESIZE要稍微设置大些,免得数据被截断,它应和相应的TRIMSPOOL结合使用防止导出的文本有太多的尾部空格。但是如果 LINESIZE设置太大,会大大降低导出的速度,另外在WINDOWS下导出最好不要用PLSQL导出,速度比较慢,直接用COMMEND下的 SQLPLUS命令最小化窗口执行。

    对于字段内包含很多回车换行符的应该给与过滤,形成比较规矩的文本文件。通常情况下,我们使用SPOOL方法,将数据库中的表导出为文本文件的时候会采用两种方法,如下述:

    方法一:采用以下格式脚本  
            set colsep '|'               --设置|为列分隔符 
      set trimspool on 
      set linesize 120 
      set pagesize 2000          
      set newpage 1 
      set heading off            
      set term off 
            set num 18                  
            set feedback off            
      spool 路径+文件名 
      select * from tablename; 
      spool off

    方法二:采用以下脚本 
            set trimspool on 
      set linesize 120 
      set pagesize 2000 
      set newpage 1 
      set heading off 
      set term off 
      spool 路径+文件名 
      select col1||','||col2||','||col3||','||col4||'..' from tablename; 
      spool off

    比较以上方法,即方法一采用设定分隔符然后由sqlplus自己使用设定的分隔符对字段进行分割,方法二将分隔符拼接在SELECT语句中,即手工控制输出格式。

    在实践中,发现通过方法一导出来的数据具有很大的不确定性,这种方法导出来的数据再由sqlldr导入的时候出错的可能性在95%以上,尤其对大批量的数据表,如100万条记录的表更是如此,而且导出的数据文件狂大。

    而方法二导出的数据文件格式很规整,数据文件的大小可能是方法一的1/4左右。经这种方法导出来的数据文件再由sqlldr导入时,出错的可能性很小,基本都可以导入成功。

    因此,实践中我建议大家使用方法二手工去控制spool文件的格式,这样可以减小出错的可能性,避免走很多弯路。


    自测例:将ssrv_sendsms_task表中的数据导出到文本(数据库Oracle 9i  操作系统 SUSE LINUX Enterprise Server 9)

    spool_test.sh脚本如下:
    #!/bin/sh
    DB_USER=zxdbm_ismp                               #DB USER
    DB_PWD=zxin_smap                                 #DB PASSWORD
    DB_SERV=zx10_40_43_133                           #DB SERVICE NAME

    sqlplus -s $DB_USER/$DB_PWD@$DB_SERV<<EOF # -s 参数屏蔽打印到屏幕上的其他信息,只显示sql执行后从DB中查询出来的信息,过滤掉spool函数执行时在文件中写入的其他信息。
    set trimspool on
    set linesize 120
    set pagesize 2000
    set newpage 1
    set heading off
    set term off
    spool promt.txt
    select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task;
    spool off
    EOF


    执行./spool_test.sh后生成sp_test.txt,内容如下:
    83|115|1|20080307
    85|115|11|20080307
    86|115|10|20080307
    84|115|2|20080307
    6|5|14|20080307
    7|5|12|20080307
    9|5|15|20080307


     注:上面自测例中,spool promt.txt中的目标生成文件promt.txt,在HP-UNX环境下的shell脚本中调用Oracle的spool函数,如果将上述逻辑代码封装为一个function,然后来调用这个function的话,则在shell脚本中最终是不会生成promt.txt文件的。只能直接执行逻辑代码,封装后则spool函数失效。
              对于promt.txt在相对路径下,下面2中方法在shell环境中执行时,两者只能择一,两者并存则spool函数会失效。假设promt.txt文件生成的路径为:/home/zxin10/zhuo/batchoperate/spoolfile
    方式[1]
    echo "start spool in shell.."

    sqlplus -s zxdbm_ismp/zxin_smap<<EOF 
    set pagesize 0
    set echo off feed off term off heading off trims off
    set colsep '|'
    set trimspool on
    set linesize 10000
    set trimspool on
    set linesize 120
    set newpage 1
    spool /home/zxin10/zhuo/batchoperate/spoolfile/promt.txt
    select batchindex||'|'||productid||'|'||contentid||'|'||optype||'|'||uploadfile from zxdbm_700.s700_batch_operation where status=1;
    spool off
    EOF
    echo "end.."
    方式[2]
    echo "start spool in shell.."
    cd /home/zxin10/zhuo/batchoperate/spoolfile
    sqlplus -s zxdbm_ismp/zxin_smap<<EOF 
    set pagesize 0
    set echo off feed off term off heading off trims off
    set colsep '|'
    set trimspool on
    set linesize 10000
    set trimspool on
    set linesize 120
    set newpage 1
    spool promt.txt
    select batchindex||'|'||productid||'|'||contentid||'|'||optype||'|'||uploadfile from zxdbm_700.s700_batch_operation where status=1;
    spool off
    EOF
    echo "end.."

    ----------------------------------

    如果用户的机器上装有oracle的客户端,
    给用户一个批处理文件totxt.bat和一个脚本文件totxt.sql,
    totxt.bat文件内容是:
    sqlplus /nolog @totxt.sql

    totxt.sql文件的内容是:
    conn username/passwd@conn_str
    set head off
    set pages 999
    set echo off
    set feed off
    set lines 150
    spool c:\test.txt
    select ....;
    spool off
    exit
  • 相关阅读:
    解决ecshop进入后台服务器出现500的问题
    Java8新特性(拉姆达表达式lambda)
    使用Optional优雅处理null
    Arrays.asList 存在的坑
    Java提供的几种线程池
    冒泡排序及优化详解
    如何让MySQL语句执行加速?
    关于https的五大误区
    127.0.0.1和0.0.0.0地址的区别
    宽带网络技术-大题重点
  • 原文地址:https://www.cnblogs.com/xingmeng/p/3043911.html
Copyright © 2020-2023  润新知