Oracle spool 小結

来源:http://www.cnblogs.com/qianyuliang/archive/2017/08/28/7445212.html
-Advertisement-
Play Games

關於SPOOL(SPOOL是SQLPLUS的命令,不是SQL語法裡面的東西。) 對於SPOOL數據的SQL,最好要自己定義格式,以方便程式直接導入,SQL語句如: select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to ...


關於SPOOL(SPOOL是SQLPLUS的命令,不是SQL語法裡面的東西。) 

對於SPOOL數據的SQL,最好要自己定義格式,以方便程式直接導入,SQL語句如: 
select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task; 

spool常用的設置 
set timing on ; //顯示SQL語句的運行時間。預設值為OFF。在SQLPLUS中使用,時間精確到0.01秒。也就是10毫秒。在PL/SQL DEVELOPER 中,時間精確到0.001秒:
set autotrace on ; //說明:設置允許對執行的SQL進行分析。預設值為OFF。
set autotrace off:不生成AUTOTRACE 報告,這是預設模式
set autotrace on explain : AUTOTRACE只顯示優化器執行路徑報告
set autotrace on statistics:只顯示執行統計信息
set autotrace on:包含執行計劃和統計信息
set autotrace traceonly:同SET AUTOTRACE ON,但是不顯示查詢輸出 
set colsep' ';    //域輸出分隔符 
set echo off;    //顯示start啟動的腳本中的每個sql命令,設置顯示“已選擇XX行”,預設為on 
set feedback off;  //回顯本次sql命令處理的記錄條數,預設為on 
set heading off;   //輸出域標題,預設為on 
set pagesize 0;   //輸出每頁行數,預設為24,為了避免分頁,可設定為0。 
set termout off;   //顯示腳本中的命令的執行結果,預設為on 
set trimout on;   //去除標準輸出每行的拖尾空格,預設為off 
set trimspool on;  //去除重定向(spool)輸出每行的拖尾空格,預設為off 
set linesize 80; //輸出一行字元個數,預設80
set numwidth 10; //輸出NUMBER類型域長度,預設為10
set serveroutput on ; //設置允許顯示輸出類似DBMS_OUTPUT size 10000000
set verify off; //可以關閉和打開提示確認信息old 1和new 1的顯示.


導出文本數據的建議格式: 
SQL*PLUS環境設置SET NEWPAGE NONE 
                SET HEADING OFF 
                SET SPACE 0 
                SET PAGESIZE 0 
                SET TRIMOUT ON 
                SET TRIMSPOOL ON 
                SET LINESIZE 2500 

註:LINESIZE要稍微設置大些,免得數據被截斷,它應和相應的TRIMSPOOL結合使用防止導出的文本有太多的尾部空格。但是如果LINESIZE設置太大,會大大降低導出的速度,另外在WINDOWS下導出最好不要用PLSQL導出,速度比較慢,直接用COMMEND下的SQLPLUS命令最小化視窗執行。 

對於欄位內包含很多回車換行符的應該給與過濾,形成比較規矩的文本文件。通常情況下,我們使用SPOOL方法,將資料庫中的表導出為文本文件的時候會採用兩種方法,如下述: 

方法一:採用以下格式腳本  
        set colsep '|'               --設置|為列分隔符 
  set trimspool on 
  set linesize 120 
  set pagesize 2000          
  set newpage 1 
  set heading off            
  set term off 
        set num 18                  
        set feedback off            
  spool 路徑+文件名 
  select * from tablename; 
  spool off 

方法二:採用以下腳本 
        set trimspool on 
  set linesize 120 
  set pagesize 2000 
  set newpage 1 
  set heading off 
  set term off 
  spool 路徑+文件名 
  select col1||','||col2||','||col3||','||col4||'..' from tablename; 
  spool off 

比較以上方法,即方法一採用設定分隔符然後由sqlplus自己使用設定的分隔符對欄位進行分割,方法二將分隔符拼接在SELECT語句中,即手工控制輸出格式。 

在實踐中,發現通過方法一導出來的數據具有很大的不確定性,這種方法導出來的數據再由sqlldr導入的時候出錯的可能性在95%以上,尤其對大批量的數據表,如100萬條記錄的表更是如此,而且導出的數據文件狂大。 

而方法二導出的數據文件格式很規整,數據文件的大小可能是方法一的1/4左右。經這種方法導出來的數據文件再由sqlldr導入時,出錯的可能性很小,基本都可以導入成功。 

因此,實踐中建議大家使用方法二手工去控制spool文件的格式,這樣可以減小出錯的可能性,避免走很多彎路。 


自測例:將ssrv_sendsms_task表中的數據導出到文本(資料庫Oracle 9i  操作系統 SUSE LINUX Enterprise Server 9) 

spool_test.sh腳本如下: 
#!/bin/sh 
DB_USER=zxdbm_ismp                               #DB USER 
DB_PWD=zxin_smap                                 #DB PASSWORD 
DB_SERV=zx10_40_43_133                           #DB SERVICE NAME 

sqlplus -s $DB_USER/$DB_PWD@$DB_SERV<<EOF # -s 參數屏蔽列印到屏幕上的其他信息,只顯示sql執行後從DB中查詢出來的信息,過濾掉spool函數執行時在文件中寫入的其他信息。 
set trimspool on 
set linesize 120 
set pagesize 2000 
set newpage 1 
set heading off 
set term off 
spool promt.txt 
select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_task; 
spool off 
EOF 


執行./spool_test.sh後生成sp_test.txt,內容如下: 
83|115|1|20080307 
85|115|11|20080307 
86|115|10|20080307 
84|115|2|20080307 
6|5|14|20080307 
7|5|12|20080307 
9|5|15|20080307 


註:上面自測例中,spool promt.txt中的目標生成文件promt.txt,在HP-UNX環境下的shell腳本中調用Oracle的spool函數,如果將上述邏輯代碼封裝為一個function,然後來調用這個function的話,則在shell腳本中最終是不會生成promt.txt文件的。只能直接執行邏輯代碼,封裝後則spool函數失效。 
          對於promt.txt在相對路徑下,下麵2中方法在shell環境中執行時,兩者只能擇一,兩者並存則spool函數會失效。假設promt.txt文件生成的路徑為:/home/zxin10/zhuo/batchoperate/spoolfile 
方式[1] 
echo "start spool in shell.." 

sqlplus -s zxdbm_ismp/zxin_smap<<EOF 
set pagesize 0 
set echo off feed off term off heading off trims off 
set colsep '|' 
set trimspool on 
set linesize 10000 
set trimspool on 
set linesize 120 
set newpage 1 
spool /home/zxin10/zhuo/batchoperate/spoolfile/promt.txt 
select batchindex||'|'||productid||'|'||contentid||'|'||optype||'|'||uploadfile from zxdbm_700.s700_batch_operation where status=1; 
spool off 
EOF 
echo "end.." 
方式[2] 
echo "start spool in shell.." 
cd /home/zxin10/zhuo/batchoperate/spoolfile 
sqlplus -s zxdbm_ismp/zxin_smap<<EOF 
set pagesize 0 
set echo off feed off term off heading off trims off 
set colsep '|' 
set trimspool on 
set linesize 10000 
set trimspool on 
set linesize 120 
set newpage 1 
spool promt.txt 
select batchindex||'|'||productid||'|'||contentid||'|'||optype||'|'||uploadfile from zxdbm_700.s700_batch_operation where status=1; 
spool off 
EOF 
echo "end.." 

 

 

本文摘自:http://wallimn.iteye.com/blog/472182


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 函數coalesce(c1,c2,c3......cn);返回第一個不為null的值 ...
  • 在Redis的官網上,我們可以看到Redis的Java客戶端眾多 ![Redis客戶端][pic1] 其中,Jedis是Redis官方推薦,也是使用用戶最多的Java客戶端。 開始前的準備 使用jedis使用到的jedis 2.1.0.jar, "點擊下載" 如果使用Redis連接池的話,需要com ...
  • 最近遇到這樣一個案例,需要修改所有SQL Server的Database Mail的SMTP,原來的SMTP為10.xxx.xxx.xxx, 現在需要修改為192.168.xxx.xxx, 另外需要規範郵件地址,以前這類郵件[email protected]的尾碼需要修改為Serve... ...
  • 一、PostgreSql9.6重置密碼的方法; 1、打開windows服務管理器,找到“postgresql-x64-9.6”服務,停止服務。 2、找到PostgreSQL9.6的安裝目錄(以我的E盤為例:E:\Program Files\PostgreSQL\9.6\data)下的許可權配置文件:p ...
  • What’s New With MySQL Replication in MySQL 8.0 MySQL複製從問世到現在已經經歷了多個年頭,它的穩定性和可靠性也在穩步的提高。這是一個不停進化的過程,由於MySQL的很多重要功能都是依賴於複製,所以複製的快速發展也是很容易理解的。 在MySQL的上一個 ...
  • 結構化查詢語言(SQL)是數據挖掘分析行業不可或缺的一項技能。對於SQL來說,編寫查詢語句只是第一步,確保查詢語句高效並且適合於你的資料庫操作工作,才是最重要的。 ...
  • 一、建表規約 1、表達是與否概念的欄位,必須使用 is_xxx 的方式命名,數據類型是 unsigned tinyint(1 表示是, 0 表示否) 。 2、表名、欄位名必須使用小寫字母或數字, 禁止出現數字開頭,禁止兩個下劃線中間只出現數字。資料庫欄位名的修改代價很大,因為無法進行預發佈,所以欄位 ...
  • 閱讀目錄 背景 TiDB是什麼 環境部署 實戰 性能測試 結語 一、背景 在上一篇嘗試CockroachDB(傳送門在此:http://www.cnblogs.com/Zachary-Fan/p/cockroachdb_net_csharp.html)的過程中,發現如果從常規的RDBMS遷移過去幾乎 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...