資料庫死鎖的問題,Deadlock found when trying to get lock; try restarting transaction at Query.formatError

来源:https://www.cnblogs.com/xulonglong/archive/2019/11/27/shu-ju-ku-si-suo-de-wen-tideadlock-found-when-tryi.html

場景:應用剛上線排除大批量請求的問題線上多次出現的Deadlock found when trying to get lock錯誤代碼:async batchUpdate(skus, { transaction }) { const result = await Promise.all(skus.m... ...


  • 場景:

    • 應用剛上線排除大批量請求的問題
    • 線上多次出現的Deadlock found when trying to get lock錯誤

  • 代碼:

async batchUpdate(skus, { transaction }) {
    const result = await Promise.all(skus.map(async sku => {
      const record = await this.app.model.Sku.upsert(sku, { transaction });
      return record;
    }));

    // SaaS 中刪掉的 sku,插件也要同步刪除
    const ids = _.map(skus, 'sku_id');
    const productIds = _.map(skus, 'product_id');
    const { Op } = this.app.Sequelize;
    
    await this.app.model.Sku.destroy({
      where: {
        sku_id: { [Op.notIn]: ids },
        product_id: productIds,
      }, transaction,
    });

    return result;
  };
  • 分析:

    • 報錯位置都是在this.app.model.Sku.destroy的時候報錯
    • Deadlock found when trying to get lock的原因是多個事物同事更新插入同一表的某一段數據
    • 在數據量不大的情況下,按道理說發生這種死鎖的情況應該非常少但是事實上出現的概率很高
  • 結論:

    • 應該是destroy使用notIn會涉及到很多行的鎖定,所以造成了死鎖。但是業務上destroy刪除的數據一般為0條。所以可以只在必要的時候進行destroy操作。
    • 更新的時候少用或不用notIn操作
  • 優化後代碼:

  async batchUpdate(skus, { transaction }) {
    const result = await Promise.all(skus.map(async sku => {
      const record = await this.app.model.Sku.upsert(sku, { transaction });
      return record;
    }));

    // SaaS 中刪掉的 sku,插件也要同步刪除
    const ids = _.map(skus, 'sku_id');
    const productIds = _.map(skus, 'product_id');
    const { Op } = this.app.Sequelize;
    const delSkus = await this.app.model.Sku.findAll({
      where: {
        sku_id: { [Op.notIn]: ids },
        product_id: productIds,
      }, transaction,
    });
    if (delSkus && delSkus.length) {
      await this.app.model.Sku.destroy({
        where: {
          sku_id: delSkus.map(sku => sku.sku_id),
        }, transaction,
      });
    }

    return result;
  };

您的分享是我們最大的動力!

更多相關文章
  • 介紹: DHCP服務作用(動態主機配置協議) 為大量客戶機自動分配地址、提供幾種管理 減輕管理和維護成本、提高網路配置效率 可分配的地址信息主要包括: 網卡的IP地址、子網掩碼 對應的網路地址、廣播地址 預設網關地址 DNS伺服器地址 引導文件、TFTP伺服器地址 原理: 1、客戶端尋找伺服器(發送 ...
  • # ### part1 單表查詢# sql 查詢語句的完整語法 ''' select .. from .. where .. group by .. having .. order by .. limit .. ''' # 一.where 條件的使用 """功能:對錶中的數據進行篩選過濾""" "" ...
  • 點擊web application ...
  • 1.InnoDB and Online DDL ALTER TABLE tbl_name ADD PRIMARY KEY (column), ALGORITHM=INPLACE, LOCK=NONE; https://dev.mysql.com/doc/refman/8.0/en/innodb-on ...
  • sql函數設計: 一開始本來是直接用Java的jdbc直接傳輸操作語句的。但後來學了存儲過程發現存儲過程可以提高不少的效率。就重構了自己對資料庫的操作代碼。包括:開啟,查找,修改,關閉。 開啟:直接使用的構造函數,以後使用的時候可以直接把對象new成一個static的變數,可以一直使用,直到使用關閉 ...
  • 問題描述:orcl伺服器要連接orclstd 想要sqlplus sys/[email protected] as sysdba 連接orclstd資料庫,但是發現啥意思密碼不對,就對sys密碼進行重新設置 1.在orcl伺服器上連接orclstd伺服器 [[email protected] orcl]$ sqlpl ...
  • 最近狀態很不好,一直暈暈暈暈暈暈乎乎的,一個測試實例,下班前修改了一下root的密碼,接著就下班走人,第二天來發現root密碼忘了 剛好自動化安裝腳本整理好了,本來想著算了直接重裝實例得了,簡單省事也花不了半分鐘,反正是測試實例,沒什麼大問題發現有些思維定勢,所以最近一直暗示自己要做一些一上來就排斥 ...
  • 創建資料庫 [[email protected] ~]# sqlite3 testDB.db ...
一周排行
  • 1. 泛型Generic 1.1 引入泛型:延遲聲明 泛型方法聲明時,並未寫死類型,在調用的時候再指定類型。 延遲聲明:推遲一切可以推遲的。 1.2 如何聲明和使用泛型 泛型方法:方法名稱後面加上尖括弧,裡面是類型參數 類型參數實際上就是一個類型T聲明,方法就可以用這個類型T了。 如下所示: pub ...
  • 本筆記摘抄自:https://www.cnblogs.com/PatrickLiu/p/7903617.html,記錄一下學習過程以備後續查用。 一、引言 今天我們要講行為型設計模式的第三個模式--迭代器模式,先從名字上來看。迭代是遍歷的意思,迭代器可以理解為是遍歷某某的工具,遍歷什麼呢?在軟 件設 ...
  • 本筆記摘抄自:https://www.cnblogs.com/PatrickLiu/p/7928521.html,記錄一下學習過程以備後續查用。 一、引言 今天我們要講行為型設計模式的第四個模式--觀察者模式,先從名字上來看。觀察者模式可以理解為既然有“觀察者”,那肯定就有“被觀察者”了。“觀察者” ...
  • 先看核心代碼: public List<DataEntity> SearchShopSalesReport(DateTimeOffset? dateFrom, DateTimeOffset? dateTo,string groupBy) { var query = data.DataEntity / ...
  • 首先新建一個項目,名稱叫Caliburn.Micro.ActionConvertions 然後刪掉MainWindow.xaml 然後去app.xaml刪掉StartupUri這行代碼 其次,安裝Caliburn.Micro,Caliburn.Micro.Core,這兩個Nuget包,如下圖 然後新 ...
  • 一文帶你瞭解 C DLR 的世界 在很久之前,我寫了一片文章 "dynamic結合匿名類型 匿名對象傳參" ,裡面我以為DLR內部是用反射實現的。因為那時候是心中想當然的認為只有反射能夠在運行時解析對象的成員信息並調用成員方法。後來也是因為其他的事一直都沒有回過頭來把這一節知識給補上,正所謂亡羊補牢 ...
  • ​ 在C#8.0中,針對介面引入了一項新特性,就是可以指定預設實現,方便對已有實現進行擴展,也對面向Android和Swift的Api進行互操作提供了可能性。下麵我們來看看該特性的具體規則與實現。 一、主要應用場景: 在不破壞影響已有實現的情況下,可以添加新成員。這解決了在第三方已經大量使用了的介面 ...
  • 前言 通常在應用程式開發到正式上線,在這個過程中我們會分為多個階段,通常會有 開發、測試、以及正式環境等。每個環境的參數配置我們會使用不同的參數,因此呢,在ASP.NET Core中就提供了相關的環境API,方便我們更好的去做這些事情。 環境 ASP.NET Core使用ASPNETCORE_ENV ...
  • 擱置了幾天,工作忙的一塌糊塗,今天終於抽空來繼續看看MVC的知識。先來看看MVC的路由是如何處理的。以下為替代的路由: app.UseEndpoints(endpoints => { endpoints.MapControllerRoute( name: "default", pattern: "{ ...
  • 多用www.bing.com國際版解決代碼報錯 代碼運行的時候,報異常,國內的搜索引擎一搜, 浮誇的廣告太多,解決方案准確性不足, 盜版又很嚴重(導致一錯皆錯),方案未及時更新等詬病。 www.bing.com國際版可以關聯到: (1). 外國官網,可以獲得官方的解決方案。 (2). stackov ...
x