Oracle Proc編程性能優化經驗

来源:https://www.cnblogs.com/kingstarer/archive/2019/12/01/11968247.html
-Advertisement-
Play Games

Proc 是Oracle提供的一種資料庫操作的AP。它是基於ESql技術的,需要預編譯後才可以變成普通c代碼,非常不直觀,使用起來不太方便,閱讀也存在困難。 因為這些問題導致程式員平時開發中會出現一些Proc操作存在效率低下的情況,本文介紹一些Proc一些編譯經驗,希望能給大家提供參考。 下麵以一個 ...


 

Proc 是Oracle提供的一種資料庫操作的AP。它是基於ESql技術的,需要預編譯後才可以變成普通c代碼,非常不直觀,使用起來不太方便,閱讀也存在困難。

因為這些問題導致程式員平時開發中會出現一些Proc操作存在效率低下的情況,本文介紹一些Proc一些編譯經驗,希望能給大家提供參考。

 

下麵以一個簡單需求進行舉例說明:

要求把DB1裡面一張數據表tbl_hch_test的數據導出到DB2的同名錶。

最快的方法當然是使用oracle的數據泵工具進行壓縮導出再導入,但expdp/impdp對資料庫環境有特別要求,所以我們需要使用Proc編程,先從DB1取出數據,再insert到Db2裡面。

 

簡單實現:

打開一個游標,從DB1迴圈FETCH數據出來,再使用sprintf拼裝成insert語句,到DB2使用exec sql指令執行插入並提交資料庫。

 

優化:

雖然上面的做法可以完成需求,但在效率上存在不優化空間。下麵依次進行介紹:

1 使用綁定變數代替sprintf拼裝sql

       實踐證明sprintf函數在對效率要求比較高的場景下容易成為性能瓶頸,使用綁定變數可以避免sprintf調用。

       並且,由於資料庫裡面執行的sql是相同的,不需要每次重新分析sql生成執行計劃,也能大大減輕資料庫負擔,提高執行效率。

 

2 對insert語句進行預編譯,一次編譯多次執行,避免使用隱性游標,每次都要重新編譯。

       同上,預編譯是比較消耗cpu的操作。如果sql相同,可以復用游標,減少性能開支。

3 使用批量操作,每次取數和插入數據都使用數組進行綁定。

       批量操作可以減少客戶端與伺服器之間交互次數,加快操作數據。

4 適當加大事務提交間隔(insert多行記錄commit一次)

       Oracle提交資料庫事務時需要將日誌從記憶體刷回磁碟並等待磁碟操作完成才返回,提高事務提交間隔可以減少等待消耗。

 

優化前後效率測試對比:

 

相同的操作,從23s降低到1.3s

 

其它提高效率措施:

以上是在編程上的一些優化,結合oracle一些特性,速度還能再提升,簡單介紹幾個優化技巧:

1 先刪除目標表索引,insert完數據後再重建

2 關閉表的日誌, 減少redo日誌,alter table tbl_hch_test nologing。裝載完數據再改回來。

3 使用append HINT,在高水位上面直接插入數據,加快插入速度。

4 使用並行(parallel)查詢,或者使用分區查詢(select * from tab parttion(par_name))加快查詢速度。

5 如果可能,儘量在資料庫伺服器上執行程式,減少網路傳輸開銷

 

 

關鍵代碼參考:

 

 

 

 

 

 

 

 

 

 

另外,附上幾個平時使用Proc容易出現誤區。

1 使用char數組保存資料庫varchar2類型欄位的值

       Proc的char數組對應的資料庫類型是char,varchar結構體對應的類型才是varchar2。使用char數組保存資料庫varchar2類型欄位的值,會導致取出的數據像char類型一樣,在末尾自動添加空格。

       解決方法可以使用EXEC SQL VAR/ EXEC SQL TYPE同等化變數或者數據類型。或者在預編譯時指定CHAR_MAP=string一勞永役

 

 

2 需要註意proc的一些命令是預編譯命令,只在預編譯期間生效,與C語言的巨集十分相似。例如以下命令:。

EXEC SQL CONTEXT USE

ESEC SQL Whenever Sqlerror Do

 

下麵舉一個常見的錯誤進行說明:

 

要完全搞明白proc的原理,建議多分析.pc文件與porc預編譯後生成的.c文件代碼區別。

 

3 proc指針變數

Proc可以正確識別指針與普通變數,使用指針做為綁定變數與使用普通變數的方法一樣,在變數前面加上冒號即可。

官方文檔是這樣說的:

 

 

 

有一些程式員不清楚怎麼在proc使用指針,會使用memcpy把數據複製多一遍,增加無謂消耗。

 

 

 

4 proc與C語言巨集

Proc能識別C語言的一些簡單的巨集,但如果有複雜的巨集(如不定參數巨集),proc在預編譯時會報錯。

此時可以考慮使用gcc –E先對.pc文件進行預處理,之後再使用proc進行預編譯。

 

 

 

如果對於proc編程還有什麼其它疑惑的地方,歡迎大家與我討論,或者查閱官方幫助文檔。《Oracle Proc官方文檔.pdf》


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 直接在對應的vhosts.conf配置文件的location / {}中添加以下內容: location / { index index.html index.htm index.php; #autoindex on; if (!-e $request_filename) { rewrite ^(. ...
  • Java 用我們學到的知識做處一個小的項目或者游戲等等應該都或多或少的有一點點的成就感吧,下列就是我用所學的基礎知識做的猜字謎游戲,並且給他賦予了靈魂哈哈哈。有興趣的可以嘗試的用自己會的知識做一些小的游戲工具什麼的提高自己,要不然你的知識不會那麼簡單的就融會貫通是吧! 有能力的可以把他改寫的更加的 ...
  • 一、關於object中的toString​方法: 1.SUN公司在Object類中設計toString方法的目的:返回java對象的字元串的表示形式。 2.在現實的開發過程中,Object裡面的toString方法已經不夠用了,因為Object的toString方法實現​的結果不滿意。Object中 ...
  • 線程池思想概述 當我們要使用線程的時候就去創建一個線程時,雖然實現方便,但是會出現問題:如果併發的線程數量很多,並且每個線程都是執行一個時間很短的任務就結束了,這樣頻繁創建線程就會大大降低系統的效率,因為頻繁創建線程和銷毀線程需要時間。 線程池的概念 線程池:其實就是一個容納多個線程的容器,其中的線 ...
  • 你好,我是彤哥,本篇是netty系列的第五篇。 簡介 上一章我們一起學習瞭如何使用Java原生NIO實現群聊系統,這章我們一起來看看Java NIO的核心組件之一——Channel。 思維轉變 首先,我想說的最重要的一個點是,學習NIO思維一定要從BIO那種一個連接一個線程的模式轉變成多個連接(Ch ...
  • pip install pymongo 基本使用:insert() remove() update() find() 官方推薦:insert_one() delete_one() update_one() find_one() ...
  • 技術:Java,Struts,Spring,Hibernate資料庫: MySQLweb伺服器:tomcat集成開發工具: My Eclipse網上手機銷售系統主要實現以下功能。本系統模塊如下:1,前臺系統功能模塊 |--商品的展示模塊 |--新品上架 |--特價商品 |--銷售排行 |--商品的查 ...
  • 安裝grafana,官網提供了ubuntu的安裝包,直接進行安裝 wget https://dl.grafana.com/oss/release/grafana_6.5.1_amd64.deb dpkg -i grafana_6.5.1_amd64.deb update-rc.d grafana-s ...
一周排行
    -Advertisement-
    Play Games
  • 概述:在C#中,++i和i++都是自增運算符,其中++i先增加值再返回,而i++先返回值再增加。應用場景根據需求選擇,首碼適合先增後用,尾碼適合先用後增。詳細示例提供清晰的代碼演示這兩者的操作時機和實際應用。 在C#中,++i 和 i++ 都是自增運算符,但它們在操作上有細微的差異,主要體現在操作的 ...
  • 上次發佈了:Taurus.MVC 性能壓力測試(ap 壓測 和 linux 下wrk 壓測):.NET Core 版本,今天計劃準備壓測一下 .NET 版本,來測試並記錄一下 Taurus.MVC 框架在 .NET 版本的性能,以便後續持續優化改進。 為了方便對比,本文章的電腦環境和測試思路,儘量和... ...
  • .NET WebAPI作為一種構建RESTful服務的強大工具,為開發者提供了便捷的方式來定義、處理HTTP請求並返迴響應。在設計API介面時,正確地接收和解析客戶端發送的數據至關重要。.NET WebAPI提供了一系列特性,如[FromRoute]、[FromQuery]和[FromBody],用 ...
  • 原因:我之所以想做這個項目,是因為在之前查找關於C#/WPF相關資料時,我發現講解圖像濾鏡的資源非常稀缺。此外,我註意到許多現有的開源庫主要基於CPU進行圖像渲染。這種方式在處理大量圖像時,會導致CPU的渲染負擔過重。因此,我將在下文中介紹如何通過GPU渲染來有效實現圖像的各種濾鏡效果。 生成的效果 ...
  • 引言 上一章我們介紹了在xUnit單元測試中用xUnit.DependencyInject來使用依賴註入,上一章我們的Sample.Repository倉儲層有一個批量註入的介面沒有做單元測試,今天用這個示例來演示一下如何用Bogus創建模擬數據 ,和 EFCore 的種子數據生成 Bogus 的優 ...
  • 一、前言 在自己的項目中,涉及到實時心率曲線的繪製,項目上的曲線繪製,一般很難找到能直接用的第三方庫,而且有些還是定製化的功能,所以還是自己繪製比較方便。很多人一聽到自己畫就害怕,感覺很難,今天就分享一個完整的實時心率數據繪製心率曲線圖的例子;之前的博客也分享給DrawingVisual繪製曲線的方 ...
  • 如果你在自定義的 Main 方法中直接使用 App 類並啟動應用程式,但發現 App.xaml 中定義的資源沒有被正確載入,那麼問題可能在於如何正確配置 App.xaml 與你的 App 類的交互。 確保 App.xaml 文件中的 x:Class 屬性正確指向你的 App 類。這樣,當你創建 Ap ...
  • 一:背景 1. 講故事 上個月有個朋友在微信上找到我,說他們的軟體在客戶那邊隔幾天就要崩潰一次,一直都沒有找到原因,讓我幫忙看下怎麼回事,確實工控類的軟體環境複雜難搞,朋友手上有一個崩潰的dump,剛好丟給我來分析一下。 二:WinDbg分析 1. 程式為什麼會崩潰 windbg 有一個厲害之處在於 ...
  • 前言 .NET生態中有許多依賴註入容器。在大多數情況下,微軟提供的內置容器在易用性和性能方面都非常優秀。外加ASP.NET Core預設使用內置容器,使用很方便。 但是筆者在使用中一直有一個頭疼的問題:服務工廠無法提供請求的服務類型相關的信息。這在一般情況下並沒有影響,但是內置容器支持註冊開放泛型服 ...
  • 一、前言 在項目開發過程中,DataGrid是經常使用到的一個數據展示控制項,而通常表格的最後一列是作為操作列存在,比如會有編輯、刪除等功能按鈕。但WPF的原始DataGrid中,預設只支持固定左側列,這跟大家習慣性操作列放最後不符,今天就來介紹一種簡單的方式實現固定右側列。(這裡的實現方式參考的大佬 ...