Dolphinscheduler不重啟載入Oracle驅動

来源:https://www.cnblogs.com/DolphinScheduler/p/18218146
-Advertisement-
Play Games

轉載自劉茫茫看山 問題背景 某天我們的租戶反饋資料庫連接缺少必要的驅動,我們通過日誌查看確實是缺少部分資料庫的驅動,因為DolphinScheduler預設只帶了Oracle和MySQL的驅動,並且需要將pom文件中的test模式去掉才可以在打包的時候引入。我們的任務量比較大,在3.0存在容錯機制的 ...


轉載自劉茫茫看山

問題背景

某天我們的租戶反饋資料庫連接缺少必要的驅動,我們通過日誌查看確實是缺少部分資料庫的驅動,因為DolphinScheduler預設只帶了Oracle和MySQL的驅動,並且需要將pom文件中的test模式去掉才可以在打包的時候引入。我們的任務量比較大,在3.0存在容錯機制的情況下,重啟Master和Worker時,任務會重覆容錯多次,對用戶使用很不友好,對Yarn集群的壓力也比較大,所以非必要不會重啟服務,這就需要在不重啟的前提下載入新的驅動包。

遇到的問題

當開始做的時候,想的過於簡單,下麵是Worker模塊下的啟動命令,libs目錄後面載入的是*,所以我們認為程式肯定會自動載入jar。

file

但是當我們將jar放到對應的目錄後,重啟測試資料庫連接,發現還是報了和之前一樣的問題。

Could not load driverClass oracle.jdbc.driver.OracleDriver

我們需要瞭解java.class.path為什麼沒有將我們新添加的驅動包載入進去,於是我們找出了worker服務的進程id,並通過jinfo命令查看類路徑的載入情況,發現java.calss.path對應的目錄從*變成了jar包的絕對路徑,我們新添加的jar的絕對路徑沒有在裡面,所以不會讀取驅動。

file

file

file

解決方法

我們最熟悉的類載入模式就是雙親委派機制,在類載入模式中存在一個ExtensioinClassloader類,它是java.lang.ClassLoader的子類,該類載入器負責載入Java的擴展庫JAVA_HOME/jre/lib/ext/*.jar或者java.ext.dirs路徑下的內容。
file

我們通過jinfo命令查看進程中的擴展目錄,發現java.ext.dirs對應的值不是絕對路徑,也就表示我們可以嘗試通過將額外的驅動jar包放到擴展目錄中載入。

file

這裡以Oracle驅動為例,通過將Oracle驅動jar放到對應的擴展目錄中,測試數據源連接情況,連接成功,希望可以給有需要的小伙伴提供有價值的參考。

本文由 白鯨開源 提供發佈支持!


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 序言Linux基本知識回顧 Linux內核安全管理機制 根文件系統rootfs Linux根目錄下文件結構 Linux文件類型標準IO 標準IO操作數據流分析 文件 打開、關閉 fopen( ) fclose( ) 文件 字元讀寫 fgetc( ) fputc( ) 文件 行讀寫 fgets( ) ...
  • 前言 exFAT是微軟2006年推出的一種文件系統,距今已快二十年,相比於FAT16和FAT32,exFAT還是算年輕。exFAT一直是微軟的一個專用文件系統,直到2019年微軟發佈它的規範,目前微軟擁有exFAT多個元素的專利,如果產品上使用exFAT,需要微軟授權,否則有可能侵權。 exFAT被 ...
  • 【標題】ODBC驅動類問題定位方法 【需求分類】故障分析 【關鍵字】ODBC 【需求描述】由於我們的ODBC介面目前尚不完善,經常會遇見ODBC介面能力不足導致應用功能無法運行的問題,需要定位手段確定底層是哪個介面報錯 【需求原因分析】方便一線資料庫管理員初步分析故障 【分析方法】 ● 由於我們的O ...
  • 管理維護Oracle資料庫的時候,有時候會碰到用戶(應用程式)遠程連接/訪問資料庫非常慢,甚至連接超時的問題。這裡簡單總結一下遇到這類問題的方法,僅供參考,如有疏漏或不足之處,敬請指正。文中部分內容來自官方文檔Doc ID 1679567.1[1] 遇到這類問題,首先應該檢查/排除網路問題,一般來說 ...
  • 【標題】kettle從DM8的number類型同步到YashanDB的varchar類型,存入是科學計數法形式的數據 【問題分類】數據導入導出 【關鍵字】數據同步,number類型,科學計數法 【問題描述】客戶查詢不到準確數據,只看到科學計數法展示的字元串。number類型存入到Oracle(MyS ...
  • Percona Toolkit 神器全攻略(實用類) Percona Toolkit 神器全攻略系列共八篇,前文回顧: 前文回顧 Percona Toolkit 神器全攻略 全文約定:$為命令提示符、greatsql>為GreatSQL資料庫提示符。在後續閱讀中,依據此約定進行理解與操作 實用類 在 ...
  • MySQL語句優化包括創建合適的索引、使用覆蓋索引、避免不必要的子查詢、通過 EXPLAIN 分析查詢計劃、進行批量操作、減少鎖定範圍、使用預編譯語句和查詢緩存,以顯著提高查詢性能和資料庫運行效率。 ...
  • 恭喜Apache SeaTunnel社區又迎來一位PMC Member@liugddx!在社區持續活躍的兩年間,大家經常看到這位開源愛好者出現在社區的各種活動中,為項目和社區發展添磚加瓦。如今成為項目PMC Member,意味著在社區中的責任更重了,他有什麼感想呢?對於社區未來的發展,他希望從哪些角 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...