記錄一次解決資料庫連接池連接泄露BUG

来源:https://www.cnblogs.com/isyues/archive/2023/08/10/17620185.html
-Advertisement-
Play Games

## 1 BUG現象 系統併發請求，系統停滯無法使用，所有介面都是無法與後端進行交互的狀態，系統並沒有宕機 ## 2 BUG的業務流程 1. 插入分數方法 涉及插入表ABCD 加了聲明式事務 2. 查詢分數方法 涉及表ABCD ``` controller() { @Transactional in ...


1 BUG現象

系統併發請求，系統停滯無法使用，所有介面都是無法與後端進行交互的狀態，系統並沒有宕機

2 BUG的業務流程

  1. 插入分數方法 涉及插入表ABCD 加了聲明式事務
  2. 查詢分數方法 涉及表ABCD
controller() {
	@Transactional
	insertVo();
	selectById();
}

3 排查原因

因為代碼不是我寫的，一開始我就是懷疑是死鎖導致的BUG，然後我用Jconsole，去檢測一下死鎖，並沒有發現死鎖，接下來我去Mysql看有沒有死鎖，結果也沒有發現，然後我就懵了，jvm沒有鎖，mysql也沒有鎖且沒有SQL在執行，為什麼請求就會全註阻塞？

然後我去開始去看這個代碼了，我發現他在控制層調用了兩個業務層，通常我們只在控制層去做校驗去調用一個service啊，然後我就繼續看，insertVo插入了很多查詢了很多，耗時3秒鐘左右，selectById查詢了一條SQL，這兩個明面上的代碼並沒有什麼加鎖或什麼飛天操作，想了半天搞不懂為什麼。

然後我開始用排除法，把這些代碼一一註釋調試一下。我把insertVo註釋掉，這個毋庸置疑，那隻有一個簡單的操作了，就查一表返回，這個絕對是沒問題的，然後我把selectById註釋掉，居然就好了？,selectById只有一條查詢SQL啊也沒有加鎖，這個能解決但是肯定也不是這個原因。

然後我用druid監控到可使用連接數一直在占用，沒有釋放，我就去查druid配置，發現配置了

initial-size: 20 #初始大小
min-idle: 20 #最小空閑
max-active: 40 #最大鏈接
max-wait: 10000 #配置獲取連接等待超時的時間

這個配置也沒有毛病啊，沒辦法了我只能去看線程的具體信息了，查出來所有的線程池連接線程都是這樣的

"pool-6-thread-10" #244 prio=5 os_prio=31 tid=0x00007fe94235f000 nid=0x22803 waiting on condition [0x00000003150ce000]
   java.lang.Thread.State: WAITING (parking)
	at sun.misc.Unsafe.park(Native Method)
	- parking to wait for  <0x00000006c109e090> (a java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject)
	at java.util.concurrent.locks.LockSupport.park(LockSupport.java:175)
	at java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject.await(AbstractQueuedSynchronizer.java:2039)
	at com.alibaba.druid.pool.DruidDataSource.takeLast(DruidDataSource.java:2315)
	at com.alibaba.druid.pool.DruidDataSource.getConnectionInternal(DruidDataSource.java:1781)
	at com.alibaba.druid.pool.DruidDataSource.getConnectionDirect(DruidDataSource.java:1494)
	at com.alibaba.druid.filter.FilterChainImpl.dataSource_connect(FilterChainImpl.java:5058)
	at com.alibaba.druid.filter.stat.StatFilter.dataSource_getConnection(StatFilter.java:704)
	at com.alibaba.druid.filter.FilterChainImpl.dataSource_connect(FilterChainImpl.java:5054)
	at com.alibaba.druid.filter.FilterAdapter.dataSource_getConnection(FilterAdapter.java:2759)
	at com.alibaba.druid.filter.FilterChainImpl.dataSource_connect(FilterChainImpl.java:5054)
	at com.alibaba.druid.pool.DruidDataSource.getConnection(DruidDataSource.java:1469)
	at com.alibaba.druid.pool.DruidDataSource.getConnection(DruidDataSource.java:1459)
	at com.alibaba.druid.pool.DruidDataSource.getConnection(DruidDataSource.java:83)
	at org.hibernate.engine.jdbc.connections.internal.DatasourceConnectionProviderImpl.getConnection(DatasourceConnectionProviderImpl.java:122)
	at org.hibernate.internal.NonContextualJdbcConnectionAccess.obtainConnection(NonContextualJdbcConnectionAccess.java:38)
	at org.hibernate.resource.jdbc.internal.LogicalConnectionManagedImpl.acquireConnectionIfNeeded(LogicalConnectionManagedImpl.java:104)
	at org.hibernate.resource.jdbc.internal.LogicalConnectionManagedImpl.getPhysicalConnection(LogicalConnectionManagedImpl.java:134)
	at org.hibernate.resource.jdbc.internal.LogicalConnectionManagedImpl.getConnectionForTransactionManagement(LogicalConnectionManagedImpl.java:250)
	at org.hibernate.resource.jdbc.internal.LogicalConnectionManagedImpl.begin(LogicalConnectionManagedImpl.java:258)
	at org.hibernate.resource.transaction.backend.jdbc.internal.JdbcResourceLocalTransactionCoordinatorImpl$TransactionDriverControlImpl.begin(JdbcResourceLocalTransactionCoordinatorImpl.java:246)
	at org.hibernate.engine.transaction.internal.TransactionImpl.begin(TransactionImpl.java:83)
	at org.springframework.orm.jpa.vendor.HibernateJpaDialect.beginTransaction(HibernateJpaDialect.java:184)
	at org.springframework.orm.jpa.JpaTransactionManager.doBegin(JpaTransactionManager.java:402)
	at org.springframework.transaction.support.AbstractPlatformTransactionManager.getTransaction(AbstractPlatformTransactionManager.java:376)
	at org.springframework.transaction.interceptor.TransactionAspectSupport.createTransactionIfNecessary(TransactionAspectSupport.java:572)
	at org.springframework.transaction.interceptor.TransactionAspectSupport.invokeWithinTransaction(TransactionAspectSupport.java:360)
	at org.springframework.transaction.interceptor.TransactionInterceptor.invoke(TransactionInterceptor.java:99)
	at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:186)
	at org.springframework.aop.framework.CglibAopProxy$CglibMethodInvocation.proceed(CglibAopProxy.java:747)
	at org.springframework.aop.interceptor.ExposeInvocationInterceptor.invoke(ExposeInvocationInterceptor.java:95)
	at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:186)
	at org.springframework.aop.framework.CglibAopProxy$CglibMethodInvocation.proceed(CglibAopProxy.java:747)
	at org.springframework.aop.framework.CglibAopProxy$DynamicAdvisedInterceptor.intercept(CglibAopProxy.java:689)
	at com.treach.platform.modules.service.impl.SysLogService$$EnhancerBySpringCGLIB$$36a85251.insert(<generated>)
	at com.treach.platform.log.factory.LogTaskFactory$2.run(LogTaskFactory.java:56)
	at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
	at java.util.concurrent.FutureTask.run(FutureTask.java:266)
	at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$201(ScheduledThreadPoolExecutor.java:180)
	at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293)
	at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
	at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
	at java.lang.Thread.run(Thread.java:750)

   Locked ownable synchronizers:
	- <0x00000007741f0d68> (a java.util.concurrent.ThreadPoolExecutor$Worker)

是的，連接池連接一直被占用鎖住了，為什麼會被鎖住呢？，也設置了連接等待超時時間啊，然後我懷疑是配置沒有生效，寫了個代碼看看

public static void main(String[] args) throws SQLException {
        ConfigurableApplicationContext run = SpringApplication.run(NdCyApplication.class, args);
        DruidDataSource bean = run.getBean(DruidDataSource.class);

        int maxActive = bean.getMaxActive();
        long maxWait = bean.getMaxWait();
        log.info("資料庫線程池與資料庫最大鏈接數" + String.valueOf(maxActive));
        log.info("資料庫線程池等待鏈接數超時時間"+String.valueOf(maxWait));
    }

結果：

資料庫線程池與資料庫最大鏈接數8
資料庫線程池等待鏈接數超時時間-1

這個和配置的不一樣啊，真的沒有生效，然後我又去查為什麼沒有生效，原來配置類裡面有個DataSoure

@Bean     //聲明其為Bean實例
@Primary  //在同樣的DataSource中，首先使用被標註的DataSource
@ConfigurationProperties(prefix = "spring.datasource")
public DruidDataSource dataSource(){
        DruidDataSource datasource = new DruidDataSource();
        List<Filter> filters = new ArrayList<>();
        filters.add(wallFilter);
        filters.add(new StatFilter());
        datasource.setProxyFilters(filters);
        return datasource;
}

我們applcation.yaml的配置被覆蓋了，druid預設等待鏈接數超時時間-1，難怪長時間占用連接沒有超時。

4 解決

把等待連接超時時間等設置上

@Bean     //聲明其為Bean實例
@Primary  //在同樣的DataSource中，首先使用被標註的DataSource
@ConfigurationProperties(prefix = "spring.datasource")
public DruidDataSource dataSource(){
        DruidDataSource datasource = new DruidDataSource();
        datasource.setInitialSize(20);
        datasource.setMaxActive(80);
        datasource.setMaxWait(5000);
        List<Filter> filters = new ArrayList<>();
        filters.add(wallFilter);
        filters.add(new StatFilter());
        datasource.setProxyFilters(filters);
        return datasource;
}

成功

5 不懂的點

為什麼會出現不回收線程的情況 按理來說現在沒有SQL在執行，連接數不是會被回收嗎 回到線程池 等待的線程就有連接了 就能不卡死了 為什麼呢？


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • go-zero 是如何實現計數器限流的？
    **原文鏈接：** [如何實現計數器限流？](https://mp.weixin.qq.com/s/CTemkZ2aKPCPTuQiDJri0Q) 上一篇文章 [go-zero 是如何做路由管理的？](https://mp.weixin.qq.com/s/uTJ1En-BXiLvH45xx0eFsA ...
  • Mahout教程_編程入門自學教程_菜鳥教程-免費教程分享
    ## 教程簡介 Mahout 是 Apache Software Foundation（ASF） 旗下的一個開源項目，提供一些可擴展的機器學習領域經典演算法的實現，旨在幫助開發人員更加方便快捷地創建智能應用程式。Mahout包含許多實現，包括聚類、分類、推薦過濾、頻繁子項挖掘。此外，通過使用 Apac ...
  • GIL 鎖或將在 CPython 中成為可選項
    哈嘍大家好，我是鹹魚 幾天前有媒體報道稱，經過多次辯論，Python 指導委員會打算批准通過 PEP 703 提案，**讓 GIL（全局解釋器）鎖在 CPython 中成為一個可選項** PEP 703 提案主要目標是使 GIL 變成可選項，即允許 Python 解釋器在特定情況下不使用GIL ![ ...
  • Tomcat+Eclipse亂碼問題解決方法
    概述 亂碼問題是大家在日常開發過程中經常會遇到的問題，由於各自環境的不同，解決起來也費時費力，本文主要介紹一般性亂碼問題的解決方法與步驟，開發工具採用Eclipse+Tomcat，統一設置項目編碼UTF-8為例，供大家參考。 解決方法與步驟 步驟一：首先，檢查JSP頁面聲明的編碼是否正確，正確示例（ ...
  • 在Python中使用LooseVersion進行軟體版本號比對
    在軟體版本快速迭代的過程中，經常會遇到一些介面變化問題。而如果需要相容舊版本的話，就需要使用到版本判斷的方法。判斷清楚版本號屬於哪一個區間，再對不同的版本號區間採取不同的演算法或者執行策略。Python中預先內置的LooseVersion就是一個很好的版本號比對工具，不僅僅可以對相同位數或者相同類型的... ...
  • Go 1.21發佈！
    原文在[這裡](https://go.dev/blog/go1.21)。 > 由Eli Bendersky, on behalf of the Go team 發佈於 8 August 2023 Go團隊今天非常高興地發佈了Go 1.21版本，你可以通過訪問[下載頁面](https://go.dev ...
  • 使用 SpringBoot 進行優雅的數據驗證
    ## JSR-303 規範 在程式進行數據處理之前，對數據進行準確性校驗是我們必須要考慮的事情。儘早發現數據錯誤，不僅可以防止錯誤向核心業務邏輯蔓延，而且這種錯誤非常明顯，容易發現解決。 JSR303 規範（Bean Validation 規範）為 JavaBean 驗證定義了相應的元數據模型和 A ...
  • Go面經 | 成都Go面試這麼捲？捲王介紹：游戲行業 3年經驗 20k+
    Go最新面經分享：演算法、併發模型、緩存落盤、etcd、actor模型、epoll等等... 本文先分享2段面經，文末總結了關鍵問題的復盤筆記。一定要看到最後！ ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類