zoukankan      html  css  js  c++  java
  • Oracle spool 小结

    关于SPOOL(SPOOL是SQLPLUS的命令,不是SQL语法里面的东西。) 

    对于SPOOL数据的SQL,最好要自己定义格式,以方便程序直接导入,SQL语句如: 
    select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task; 

    spool常用的设置 
    set timing on ; //显示SQL语句的运行时间。默认值为OFF。在SQLPLUS中使用,时间精确到0.01秒。也就是10毫秒。在PL/SQL DEVELOPER 中,时间精确到0.001秒:
    set autotrace on ; //说明:设置允许对执行的SQL进行分析。默认值为OFF。
    set autotrace off:不生成AUTOTRACE 报告,这是缺省模式
    set autotrace on explain : AUTOTRACE只显示优化器执行路径报告
    set autotrace on statistics:只显示执行统计信息
    set autotrace on:包含执行计划和统计信息
    set autotrace traceonly:同SET AUTOTRACE ON,但是不显示查询输出 
    set colsep' ';    //域输出分隔符 
    set echo off;    //显示start启动的脚本中的每个sql命令,设置显示“已选择XX行”,缺省为on 
    set feedback off;  //回显本次sql命令处理的记录条数,缺省为on 
    set heading off;   //输出域标题,缺省为on 
    set pagesize 0;   //输出每页行数,缺省为24,为了避免分页,可设定为0。 
    set termout off;   //显示脚本中的命令的执行结果,缺省为on 
    set trimout on;   //去除标准输出每行的拖尾空格,缺省为off 
    set trimspool on;  //去除重定向(spool)输出每行的拖尾空格,缺省为off 
    set linesize 80; //输出一行字符个数,默认80
    set numwidth 10; //输出NUMBER类型域长度,缺省为10
    set serveroutput on ; //设置允许显示输出类似DBMS_OUTPUT size 10000000
    set verify off; //可以关闭和打开提示确认信息old 1和new 1的显示.


    导出文本数据的建议格式: 
    SQL*PLUS环境设置SET NEWPAGE NONE 
                    SET HEADING OFF 
                    SET SPACE 0 
                    SET PAGESIZE 0 
                    SET TRIMOUT ON 
                    SET TRIMSPOOL ON 
                    SET LINESIZE 2500 

    注:LINESIZE要稍微设置大些,免得数据被截断,它应和相应的TRIMSPOOL结合使用防止导出的文本有太多的尾部空格。但是如果LINESIZE设置太大,会大大降低导出的速度,另外在WINDOWS下导出最好不要用PLSQL导出,速度比较慢,直接用COMMEND下的SQLPLUS命令最小化窗口执行。 

    对于字段内包含很多回车换行符的应该给与过滤,形成比较规矩的文本文件。通常情况下,我们使用SPOOL方法,将数据库中的表导出为文本文件的时候会采用两种方法,如下述: 

    方法一:采用以下格式脚本  
            set colsep '|'               --设置|为列分隔符 
      set trimspool on 
      set linesize 120 
      set pagesize 2000          
      set newpage 1 
      set heading off            
      set term off 
            set num 18                  
            set feedback off            
      spool 路径+文件名 
      select * from tablename; 
      spool off 

    方法二:采用以下脚本 
            set trimspool on 
      set linesize 120 
      set pagesize 2000 
      set newpage 1 
      set heading off 
      set term off 
      spool 路径+文件名 
      select col1||','||col2||','||col3||','||col4||'..' from tablename; 
      spool off 

    比较以上方法,即方法一采用设定分隔符然后由sqlplus自己使用设定的分隔符对字段进行分割,方法二将分隔符拼接在SELECT语句中,即手工控制输出格式。 

    在实践中,发现通过方法一导出来的数据具有很大的不确定性,这种方法导出来的数据再由sqlldr导入的时候出错的可能性在95%以上,尤其对大批量的数据表,如100万条记录的表更是如此,而且导出的数据文件狂大。 

    而方法二导出的数据文件格式很规整,数据文件的大小可能是方法一的1/4左右。经这种方法导出来的数据文件再由sqlldr导入时,出错的可能性很小,基本都可以导入成功。 

    因此,实践中建议大家使用方法二手工去控制spool文件的格式,这样可以减小出错的可能性,避免走很多弯路。 


    自测例:将ssrv_sendsms_task表中的数据导出到文本(数据库Oracle 9i  操作系统 SUSE LINUX Enterprise Server 9) 

    spool_test.sh脚本如下: 
    #!/bin/sh 
    DB_USER=zxdbm_ismp                               #DB USER 
    DB_PWD=zxin_smap                                 #DB PASSWORD 
    DB_SERV=zx10_40_43_133                           #DB SERVICE NAME 

    sqlplus -s $DB_USER/$DB_PWD@$DB_SERV<<EOF # -s 参数屏蔽打印到屏幕上的其他信息,只显示sql执行后从DB中查询出来的信息,过滤掉spool函数执行时在文件中写入的其他信息。 
    set trimspool on 
    set linesize 120 
    set pagesize 2000 
    set newpage 1 
    set heading off 
    set term off 
    spool promt.txt 
    select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task; 
    spool off 
    EOF 


    执行./spool_test.sh后生成sp_test.txt,内容如下: 
    83|115|1|20080307 
    85|115|11|20080307 
    86|115|10|20080307 
    84|115|2|20080307 
    6|5|14|20080307 
    7|5|12|20080307 
    9|5|15|20080307 


    注:上面自测例中,spool promt.txt中的目标生成文件promt.txt,在HP-UNX环境下的shell脚本中调用Oracle的spool函数,如果将上述逻辑代码封装为一个function,然后来调用这个function的话,则在shell脚本中最终是不会生成promt.txt文件的。只能直接执行逻辑代码,封装后则spool函数失效。 
              对于promt.txt在相对路径下,下面2中方法在shell环境中执行时,两者只能择一,两者并存则spool函数会失效。假设promt.txt文件生成的路径为:/home/zxin10/zhuo/batchoperate/spoolfile 
    方式[1] 
    echo "start spool in shell.." 

    sqlplus -s zxdbm_ismp/zxin_smap<<EOF 
    set pagesize 0 
    set echo off feed off term off heading off trims off 
    set colsep '|' 
    set trimspool on 
    set linesize 10000 
    set trimspool on 
    set linesize 120 
    set newpage 1 
    spool /home/zxin10/zhuo/batchoperate/spoolfile/promt.txt 
    select batchindex||'|'||productid||'|'||contentid||'|'||optype||'|'||uploadfile from zxdbm_700.s700_batch_operation where status=1; 
    spool off 
    EOF 
    echo "end.." 
    方式[2] 
    echo "start spool in shell.." 
    cd /home/zxin10/zhuo/batchoperate/spoolfile 
    sqlplus -s zxdbm_ismp/zxin_smap<<EOF 
    set pagesize 0 
    set echo off feed off term off heading off trims off 
    set colsep '|' 
    set trimspool on 
    set linesize 10000 
    set trimspool on 
    set linesize 120 
    set newpage 1 
    spool promt.txt 
    select batchindex||'|'||productid||'|'||contentid||'|'||optype||'|'||uploadfile from zxdbm_700.s700_batch_operation where status=1; 
    spool off 
    EOF 
    echo "end.." 

    本文摘自:http://wallimn.iteye.com/blog/472182

  • 相关阅读:
    hdu 5007 水题 (2014西安网赛A题)
    hdu 1698 线段树(成段替换 区间求和)
    poj 3468 线段树 成段增减 区间求和
    hdu 2795 公告板 (单点最值)
    UVaLive 6833 Miscalculation (表达式计算)
    UVaLive 6832 Bit String Reordering (模拟)
    CodeForces 124C Prime Permutation (数论+贪心)
    SPOJ BALNUM (数位DP)
    CodeForces 628D Magic Numbers (数位DP)
    POJ 3252 Round Numbers (数位DP)
  • 原文地址:https://www.cnblogs.com/qianyuliang/p/7445212.html
Copyright © 2011-2022 走看看