關於SPOOL(SPOOL是SQLPLUS的命令,不是SQL文法裡面的東西。)
對於SPOOL資料的SQL,最好要自己定義格式,以方便程式直接匯入,SQL語句如:
select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task;
spool常用的設定
set colsep' '; //域輸出分隔字元
set echo off; //顯示start啟動的指令碼中的每個sql命令,預設為on
set feedback off; //回顯本次sql命令處理的記錄條數,預設為on
set heading off; //輸出域標題,預設為on
set pagesize 0; //輸出每頁行數,預設為24,為了避免分頁,可設定為0。
set termout off; //顯示指令碼中的命令的執行結果,預設為on
set trimout on; //去除標準輸出每行的拖尾空格,預設為off
set trimspool on; //去除重新導向(spool)輸出每行的拖尾空格,預設為off
匯出文本資料的建議格式:
SQL*PLUS環境設定SET NEWPAGE NONE
SET HEADING OFF
SET SPACE 0
SET PAGESIZE 0
SET TRIMOUT ON
SET TRIMSPOOL ON
SET LINESIZE 2500
註:LINESIZE要稍微設定大些,免得資料被截斷,它應和相應的TRIMSPOOL結合使用防止匯出的文本有太多的尾部空格。但是如果LINESIZE設定太大,會大大降低匯出的速度,另外在WINDOWS下匯出最好不要用PLSQL匯出,速度比較慢,直接用COMMEND下的SQLPLUS命令已最小化的視窗執行。
對於欄位內包含很多斷行符號分行符號的應該給與過濾,形成比較規矩的文字檔。通常情況下,我們使用SPOOL方法,將資料庫中的表匯出為文字檔的時候會採用兩種方法,如下述:
方法一:採用以下格式指令碼
set colsep '|' --設定|為資料行分隔符號
set trimspool on
set linesize 120
set pagesize 2000
set newpage 1
set heading off
set term off
set num 18
set feedback off
spool 路徑+檔案名稱
select * from tablename;
spool off
方法二:採用以下指令碼
set trimspool on
set linesize 120
set pagesize 2000
set newpage 1
set heading off
set term off
spool 路徑+檔案名稱
select col1||','||col2||','||col3||','||col4||'..' from tablename;
spool off
比較以上方法,即方法一採用設定分隔字元然後由sqlplus自己使用設定的分隔字元對欄位進行分割,方法二將分隔字元拼接在SELECT語句中,即手工控制輸出格式。
在實踐中,發現通過方法一匯出來的資料具有很大的不確定性,這種方法匯出來的資料再由sqlldr匯入的時候出錯的可能性在95%以上,尤其對大批量的資料表,如100萬條記錄的表更是如此,而且匯出的資料檔案狂大。
而方法二匯出的資料檔案格式很規整,資料檔案的大小可能是方法一的1/4左右。經這種方法匯出來的資料檔案再由sqlldr匯入時,出錯的可能性很小,基本都可以匯入成功。
因此,實踐中我建議大家使用方法二手工去控制spool檔案的格式,這樣可以減小出錯的可能性,避免走很多彎路。
自測例:將ssrv_sendsms_task表中的資料匯出到文本(資料庫Oracle 9i 作業系統 SUSE LINUX Enterprise Server 9)
spool_test.sh指令碼如下:
#!/bin/sh
DB_USER=zxdbm_ismp #DB USER
DB_PWD=zxin_smap #DB PASSWORD
DB_SERV=zx10_40_43_133 #DB SERVICE NAME
send_day=`sqlplus -s $DB_USER/$DB_PWD@$DB_SERV<<! #-s 參數屏蔽列印到螢幕上的其他資訊,只顯示sql執行資訊
set trimspool on
set linesize 120
set pagesize 2000
set newpage 1
set heading off
set term off
spool sp_test.txt
select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task;
spool off
/
!`
執行./spool_test.sh後產生sp_test.txt,內容如下:
83|115|1|20080307
85|115|11|20080307
86|115|10|20080307
84|115|2|20080307
6|5|14|20080307
7|5|12|20080307
9|5|15|20080307
set time off echo off head off
set trimspool on
set termout off
set pagesize 0
set colsep ","
set trims on
set trimout on;
set feedback off
spool d:/test.csv
select rownum||','||empno||','||ename from emp;
spool off