• Oracle sqlldr导入导出txt数据文件详解


    一、sqlldr导入txt

    1.预备

    a).txt文件

    这里要保存成无签名的UTF-8

    b).oracle建表

    2.编写控制文件input_test.ctl

    LOAD DATA

    CHARACTERSET 'UTF8' --字符集设定
    INFILE 'd:input_test.txt' --要导入的文本数据路径,可写多个
    REPLACE into TABLE input_test --清空原有数据再导入方式 追加导入 用append into table t_name
    fields terminated by X'09' --以制表符分隔
    trailing nullcols --允许空列导入

    (col1,col2)

    当col1为日期类型时,在控制文件中的字段里把col1改成
    col1 "to_date(:col1,'''yyyy-mm-dd hh24:mi:ss''')"即可解决。

    注:

    infile 'd:input_test.txt'表示需要装载的数据文件的路径

    append into table test 数据载入的表:
    (1)append 表示表中有数据,加在后面
    (2)INSERT 表示装入空表,有数据则停止。默认值
    (3)REPLACE 原先表中如果有数据,会被删除
    (4)TRUNCATE 如果要载入的数据与现在的数据相同,载入的数据替换现存的数据。
    fields terminated by ',‘

    表示数据用是','分隔的,用by X'09',即16进制的"09"代表TAB制表符,常用于excel转换的tab制表符文件的数据的导入。常用分隔符还有'|'

    多语种可设置字符集编码为:CHARACTERSET 'UTF8'

    3.DOS下执行

    sqlldr system/psw@db, control=c:inputinput_test.ctl log=c:inputinput_test.log bad=c:inputinput_test.bad

    有效的关键字:

    userid -- ORACLE username/password

    @db  -- 链接适配器名称(Net Manager配置的链接名称)

    control – 控制文件

    log – 记录的日志文件

    bad – 坏数据文件

    data – 数据文件

    discard – 丢弃的数据文件

    discardmax – 允许丢弃数据的最大值 (全部默认)

    skip -- Number of logical records to skip (默认0)

    load -- Number of logical records to load (全部默认)

    errors – 允许的错误记录数 (默认50)

    rows -- Number of rows in conventional path bind array or between direct path data saves(每次提交的记录数,默认: 常规路径 64, 所有直接路径)

    bindsize -- Size of conventional path bind array in bytes(默认256000)

    每次提交记录的缓冲区的大小(字节为单位,默认256000)

    silent --禁止输出信息 (header,feedback,errors,discards,partitions)

    direct – 使用直通路径方式导入 (默认FALSE)

    parfile -- parameter file: name of file that contains parameter specifications

    parallel -- 并行导入 (默认FALSE)

    file -- File to allocate extents from

    skip_unusable_indexes -- disallow/allow unusable indexes or index partitions(默认FALSE)

    skip_index_maintenance -- do not maintain indexes, mark affected indexes as unusable(默认FALSE)

    readsize -- Size of Read buffer (默认1048576)

    与bindsize成对使用,其中较小者会自动调整到较大者。sqlldr先计算单条记录长度,乘以rows,如小于bindsize,不会试图扩张rows以填充bindsize;如超出,则以bindsize为准。


    external_table -- use external table for load; NOT_USED, GENERATE_ONLY, EXECUTE(默认NOT_USED)

    columnarrayrows -- Number of rows for direct path column array(默认5000)

    streamsize -- Size of direct path stream buffer in bytes(默认256000)

    multithreading -- use multithreading in direct path

    resumable -- enable or disable resumable for current session(默认FALSE)

    resumable_name -- text string to help identify resumable statement

    resumable_timeout -- wait time (in seconds) for RESUMABLE(默认7200)

    date_cache -- size (in entries) of date conversion cache(默认1000)

    4.写成.bat批处理

    上述3步已完成了txt导入,在windows下还可将sqlldr命令写成批处理文件,双击执行.

    @echo off

    echo input_test

    pause --暂停,建议加入,以免错误双击执行
    @rem
    sqlldr system/psw@db, control=c:inputinput_test.ctl log=c:inputinput_test.log bad=c:inputinput_test.bad
    @rem
    @rem sqlldr system/psw@db, control=c:inputinput_test.ctl rows=100000
    pause

    二、sqlldr导出txt

    利用spool 导出txt

    1.写output.sql

    sqlplus system/psw@db as sysdba --连接oracle
    CHARACTERSET al32UTF8 --设置编码集
    set trimspool on --打开池
    spool c:outputoutput.txt --池输出路径
    set pagesize 0 --页设置
    set heading off --关闭表头
    set linesize 32767 --最大行显
    select '#'||col1||'#,#'||col2||'#,#'||col3||'#‘ --设置需要的列格式。此例,列间以以逗号分隔,列内容用#引起。

    from test_data;
    exit; --退出sqlplus
    spool off --关闭池
    pause

    注:上述命令在dos下直接敲命令执行亦可。

    2.写成.bat批处理

    再写bat调用上面的outputsql文件,如下:

    cd/
    set NLS_LANG=.AL32UTF8 --设置字符集utf8
    chcp 65001 --转换编码页utf8
    @echo off
    echo data output
    pause
    @rem
    sqlplus system/psw@db as sysdba @c:dmp_sqloutput.sql
    @rem
    pause

    ctl文件的例子:

    OPTIONS(skip_index_maintenance=TRUE,direct=true,BINDSIZE=20971520,READSIZE=20971520,ERRORS=-1,ROWS=500000)
    --unrecoverable
    LOAD DATA
    --CHARACTERSET AL32UTF8
    INFILE 'c:inputBarcode.txt' ---------数据文件,即txt文件
    Append INTO TABLE Demoaa.TMS_BRANCHCODE -----表名
    FIELDS TERMINATED BY X'09' ------数据用制表符分割
    trailing nullcols
    (ID ------表中字段
    ,Branch_plant
    ,SO_Number
    ,Trip_Number
    ,Shippment_Date "to_date(:Shippment_Date,'''yyyy-mm-dd hh24:mi:ss''')"
    ,Sold_to
    ,Sold_to_Name
    ,Ship_to
    ,Ship_to_Name
    ,BarCode_Info
    ,Barcode_Seg_1
    ,Barcode_Seg_2
    ,Barcode_Seg_3
    ,Barcode_Seg_4
    ,Barcode_Seg_5
    ,Last_updated_time "to_date(:Last_updated_time,'''yyyy-mm-dd hh24:mi:ss''')"
    )

  • 相关阅读:
    Thinkphp 5.0.15 设计缺陷导致Insert/update-SQL注入 分析
    Thinkphp 3.2.3 parseWhere设计缺陷导致update/delete注入 分析
    Thinkphp <= 5.0.10 缓存getshell复现
    Typecho-反序列化漏洞学习
    Discuz3.4-SSRF-从触发点到构造payload
    php session序列化攻击面浅析
    浅析一款扫描dom-xss的浏览器插件
    sqlmap Bool型&延时型 检测策略分析
    SpringSecurityOauth RCE (CVE-2016-4977) 分析与复现
    k8s之statefulSet-有状态应用副本集控制器
  • 原文地址:https://www.cnblogs.com/colder/p/4651176.html
Copyright © 2020-2023  润新知