Oracle spool 应用

浏览数：39 / 时间：2015年06月12日

关于spool(spool是SQLPLUS的命令，不是SQL语法里面的东西。)
对于spool数据的SQL，最好要自己定义格式，以方便程序直接导入,SQL语句如：

select taskindex || ‘|‘ || commonindex || ‘|‘ || tasktype || ‘|‘ ||
       to_number(to_char(sysdate, ‘YYYYMMDD‘))
  from ssrv_sendsms_task;

spool常用的设置

set colsep ‘ ‘;　　　-- 域输出分隔符。
set echo off;　　　　-- 显示start启动的脚本中的每个sql命令，缺省为on。
set feedback off;　　-- 回显本次sql命令处理的记录条数“已选择XX行”，缺省为on。
set heading off;　　 -- 输出域标题，缺省为on。
set pagesize 0;　　　-- 输出每页行数，缺省为24，当值设为0时，输出内容为一页且不显示列标题，为了避免分页，可设定为0。
set termout off;　　 -- 显示脚本中的命令的执行结果，缺省为on。
set trimout on;　　　-- 去除标准输出每行的拖尾空格，缺省为off。
set trimspool on;　　-- 去除重定向（spool）输出每行的拖尾空格，缺省为off。
set linesize 1000;   -- 设置一行可以容纳的字符数{80|n}，输出内容大于设置的值则折行显示。据实际字符设置，过大导出速度慢。
set wrap on;         -- 输出行长度大于设置行长度时(用set linesize n命令设置);值为on时,多余的字符另起一行显示,否则多余的字符将被切除，不予显示，默认为换行。
set timing on;       -- 设置显示“已用时间：XXXX”。
set serveroutput on; -- 设置允许显示输出类似dbms_output。
set numwidth 12;　   -- 输出number类型域长度，缺省为10。
set null text        -- 显示时，用text值代替NULL值；
set newpage none;    -- 设置页与页之间的分隔{1|n|NONE};当值为0时在每页开头有一个小的黑方框;当值为n时在页和页之间隔着n个空行;当为none时，会在页和页之间没有任何间隔。
set verify off;      -- 是否显示替代变量被替代前后的语句。
set space 0;         -- 设置各列间的空格数。

导出文本数据的建议格式：

set newpage none
set heading off
set space 0
set pagesize 0
set trimout on
set trimspool on
set linesize 2500

注：linesize要稍微设置大些，免得数据被截断，它应和相应的TRIMSPOOL结合使用防止导出的文本有太多的尾部空格。但是如果LINESIZE设置太大，会大大降低导出的速度，另外在WINDOWS下导出最好不要用PLSQL导出，速度比较慢，直接用COMMEND下的SQLPLUS命令最小化窗口执行。

对于字段内包含很多回车换行符的应该给予过滤，形成比较规矩的文本文件。通常情况下，我们使用SPOOL方法，将数据库中的表导出为文本文件的时候会采用两种方法，如下述：

方法一：采用以下格式脚本　

set colsep ‘|‘ --设置|为列分隔符
set trimspool on
set linesize 120
set pagesize 2000
set newpage 1
set heading off
set term off
set num 18
set feedback off
spool 路径+文件名
select * from tablename;
spool off

方法二：采用以下脚本

set trimspool on
set linesize 120
set pagesize 2000
set newpage 1
set heading off
set term off
spool 路径+文件名
select col1||‘,‘||col2||‘,‘||col3||‘,‘||col4||‘..‘ from tablename;
spool off

比较以上方法，即方法一采用设定分隔符然后由sqlplus自己使用设定的分隔符对字段进行分割，方法二将分隔符拼接在SELECT语句中，即手工控制输出格式。在实践中，发现通过方法一导出来的数据具有很大的不确定性，这种方法导出来的数据再由sqlldr导入的时候出错的可能性在95%以上，尤其对大批量的数据表，如100万条记录的表更是如此，而且导出的数据文件狂大。而方法二导出的数据文件格式很规整，数据文件的大小可能是方法一的1/4左右。经这种方法导出来的数据文件再由sqlldr导入时，出错的可能性很小，基本都可以导入成功。因此，实践中我建议大家使用方法二手工去控制spool文件的格式，这样可以减小出错的可能性，避免走很多弯路。

自测例：将ssrv_sendsms_task表中的数据导出到文本(数据库Oracle 9i 操作系统 SUSE LINUX Enterprise Server 9)

spool_test.sh脚本如下：

#!/bin/sh
DB_USER=zxdbm_ismp #DB USER
DB_PWD=zxin_smap #DB PASSWORD
DB_SERV=zx10_40_43_133 #DB SERVICE NAME

sqlplus -s $DB_USER/$DB_PWD@$DB_SERV<<EOF # -s 参数屏蔽打印到屏幕上的其他信息，只显示sql执行后从DB中查询出来的信息，过滤掉spool函数执行时在文件中写入的其他信息。
set trimspool on
set linesize 120
set pagesize 2000
set newpage 1
set heading off
set term off
spool promt.txt
select taskindex||‘|‘||commonindex||‘|‘||tasktype||‘|‘||to_number(to_char(sysdate,‘YYYYMMDD‘)) from ssrv_sendsms_task;
spool off
EOF

执行./spool_test.sh后生成sp_test.txt，内容如下：
83|115|1|20080307
85|115|11|20080307
86|115|10|20080307
84|115|2|20080307
6|5|14|20080307
7|5|12|20080307
9|5|15|20080307

注：上面自测例中，spool promt.txt中的目标生成文件promt.txt,在HP-UNX环境下的shell脚本中调用Oracle的spool函数，如果将上述逻辑代码封装为一个function，然后来调用这个function的话，则在shell脚本中最终是不会生成promt.txt文件的。只能直接执行逻辑代码，封装后则spool函数失效。
对于promt.txt在相对路径下，下面2种方法在shell环境中执行时，两者只能择一，两者并存则spool函数会失效。假设promt.txt文件生成的路径为：/home/zxin10/zhuo/batchoperate/spoolfile
方式[1]

echo "start spool in shell.."
sqlplus -s zxdbm_ismp/zxin_smap<<EOF
set pagesize 0
set echo off feed off term off heading off trims off
set colsep ‘|‘
set trimspool on
set linesize 10000
set trimspool on
set linesize 120
set newpage 1
spool /home/zxin10/zhuo/batchoperate/spoolfile/promt.txt
select batchindex||‘|‘||productid||‘|‘||contentid||‘|‘||optype||‘|‘||uploadfile from zxdbm_700.s700_batch_operation where status=1;
spool off
EOF
echo "end.."

方式[2]

echo "start spool in shell.."
cd /home/zxin10/zhuo/batchoperate/spoolfile
sqlplus -s zxdbm_ismp/zxin_smap<<EOF
set pagesize 0
set echo off feed off term off heading off trims off
set colsep ‘|‘
set trimspool on
set linesize 10000
set trimspool on
set linesize 120
set newpage 1
spool promt.txt
select batchindex||‘|‘||productid||‘|‘||contentid||‘|‘||optype||‘|‘||uploadfile from zxdbm_700.s700_batch_operation where status=1;
spool off
EOF
echo "end.."