sqlplus spool中的格式調整

2021-06-04 15:42:15 字數 2965 閱讀 9078

注:對於spool最好能夠自己進行格式調整,而不用spool中提供的 「set colsep | 」 使用這個語句會出現不確定性,自己匯出一下看下就知道了

spool常用的設定

set colsep 自定義字元 //域輸出分隔符

set echo off //顯示start啟動的指令碼中的每個

sql命令,預設為on

set feedback off //回顯本次

sql命令處理的記錄條數,預設為on

set heading off //輸出域標題,預設為on

set pagesize 0 //輸出每頁行數,預設為24,為了避免分頁,可設定為0。

set termout off //顯示指令碼中的命令的執行結果,預設為on

set trimout on //去除標準輸出每行的拖尾空格,預設為off

set trimspool on //去除重定向(spool)輸出每行的拖尾空格,預設為off

匯出文字資料的建議格式:

sql*plus環境設定set newpage none

set heading off

set space 0

set pagesize 0

set trimout on

set trimspool on

set linesize 2500

注:linesize要稍微設定大些,免得資料被截斷,它應和相應的trimspool結合使用防止匯出的文字有太多的尾部空格。但是如果 linesize設定太大,會大大降低匯出的速度,另外在windows下匯出最好不要用plsql匯出,速度比較慢,直接用commend下的 sqlplus命令最小化視窗執行。

對於欄位內包含很多回車換行符的應該給與過濾,形成比較規矩的文字檔案。通常情況下,我們使用spool方法,將資料庫中的表匯出為文字檔案的時候會採用兩種方法,如下述:

方法一:採用以下格式指令碼 

set colsep '|' --設定|為列分隔符

set trimspool on

set linesize 120

set pagesize 2000 

set newpage 1

set heading off 

set term off

set num 18 

set feedback off 

spool 路徑+檔名

select * from tablename;

spool off

方法二:採用以下指令碼

set trimspool on

set linesize 120

set pagesize 2000

set newpage 1

set heading off

set term off

spool 路徑+檔名

select col1||','||col2||','||col3||','||col4||'..' from tablename;

spool off

比較以上方法,即方法一採用設定分隔符然後由sqlplus自己使用設定的分隔符對欄位進行分割,方法二將分隔符拼接在select語句中,即手工控制輸出格式。

在實踐中,發現通過方法一匯出來的資料具有很大的不確定性,這種方法匯出來的資料再由sqlldr匯入的時候出錯的可能性在95%以上,尤其對大批量的資料表,如100萬條記錄的表更是如此,而且匯出的資料檔案狂大。

而方法二匯出的資料檔案格式很規整,資料檔案的大小可能是方法一的1/4左右。經這種方法匯出來的資料檔案再由sqlldr匯入時,出錯的可能性很小,基本都可以匯入成功。

因此,實踐中我建議大家使用方法二手工去控制spool檔案的格式,這樣可以減小出錯的可能性,避免走很多彎路。

測例:將ssrv_sendsms_task表中的資料匯出到文字(資料庫oracle 9i 作業系統 suse linux enterprise server 9)

spool_test.sh指令碼如下:

#!/bin/sh

db_user=zxdbm_ismp #db user

db_pwd=zxin_smap #db password

db_serv=zx10_40_43_133 #db service name

send_day=`sqlplus -s $db_user/$db_pwd@$db_serv執行資訊

set trimspool on

set linesize 120

set pagesize 2000

set newpage 1

set heading off

set term off

spool sp_test.txt

select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'yyyymmdd')) from ssrv_sendsms_task;

spool off/!`

執行./spool_test.sh後生成sp_test.txt,內容如下:

83|115|1|20080307

85|115|11|20080307

86|115|10|20080307

84|115|2|20080307

6|5|14|20080307

7|5|12|20080307

9|5|15|20080307

set time off echo off head off

set trimspool on

set termout off

set pagesize 0

set colsep ","

set trims on

set trimout on;

set feedback off

spool d:\test.csv

select rownum||','||empno||','||ename from emp;

spool off

Tensorflow中TFRecord格式介紹

由於資料的 複雜性以及每乙個樣例中的資訊較為豐富,從而需要一種統一的格式來儲存資料,然而在tensorflow中提供了tfreord的格式來統一輸入資料的格式。tfrecord檔案中的資料是通過tf.train.example protoclo buffer的格式儲存 tf.train.exampl...

自定義Extjs中Grid單元格的顯示格式

有時候,需要在grid中顯示乙個鏈結,或根據數字的大小顯示不同的顏色,又或者使用固定格式顯示記錄編號等,這就需要自定義單元格的顯示格式。在 ext的grid可以很容易的實現自定義單元格的顯示格式。在定義grid的columnmodel的時候,在需要自定義顯示格式的列中加入引數 renderer,該引...

UITableView中的單元格重用

uitableview通過重用單元格來達到節省記憶體的目的 通過為每個單元格指定乙個重用識別符號 reuseidentifier 即指定了單元格的種類,以及當單元格滾出螢幕時,允許恢復單元格以便重用.對於不同種類的單元格使用不同的id,對於簡單的 乙個識別符號就夠了.假如乙個tableview中有1...