面試官:高併發場景下,你們是怎麼保證數據的一致性的?

来源:https://www.cnblogs.com/yidengjiagou/archive/2022/06/13/16371838.html
-Advertisement-
Play Games

面試的時候,總會遇到這麼一個場景。 1. 場景分析 面試官:你們的服務的QPS是多少? 我:我們的服務高峰期訪問量還挺大的,大約是3萬吧。 面試官:這麼大的訪問量,你們的伺服器能撐住嗎?有加緩存嗎? 我:有的,我們使用了Redis做緩存,介面優先查詢緩存,緩存不存在,才訪問資料庫。這樣可以減少資料庫 ...


面試的時候,總會遇到這麼一個場景。

1. 場景分析

面試官:你們的服務的QPS是多少?

我:我們的服務高峰期訪問量還挺大的,大約是3萬吧。

面試官:這麼大的訪問量,你們的伺服器能撐住嗎?有加緩存嗎?

我:有的,我們使用了Redis做緩存,介面優先查詢緩存,緩存不存在,才訪問資料庫。這樣可以減少資料庫訪問壓力,加快查詢效率。

面試官:一份數據存儲在兩個地方,更新數據的時候,你們是怎麼保證數據的一致性的?

看到了吧,好的面試官一般不直接問你數據一致性的解決方案,而是循循善誘,結合具體的使用場景,再問你解決方法。如果你沒做過這方面,沒有線上的實戰經驗,一般很難回答的有條理性、有思考性。

保證數據一致性,一般有這4種方法:

  1. 先更新緩存,再更新資料庫。
  2. 先更新資料庫,再更新緩存。
  3. 先刪除緩存,再更新資料庫。
  4. 先更新資料庫,再刪除緩存。

每種方案都詳細的討論一下:

2. 解決方案

2.1 先更新緩存,再更新資料庫

如果同時來了兩個併發寫請求,執行過程是這樣的:

  1. 寫請求1更新緩存,設置age為1
  2. 寫請求2更新緩存,設置age為2
  3. 寫請求2更新資料庫,設置age為2
  4. 寫請求1更新資料庫,設置age為1

執行結果就是,緩存里age被設置2,資料庫里的age被設置成1,導致數據不一致,此方案不可行。

2.2 先更新資料庫,再更新緩存

如果同時來了兩個併發寫請求,執行過程是這樣的:

  1. 寫請求1更新資料庫,設置age為1
  2. 寫請求2更新資料庫,設置age為2
  3. 寫請求2更新緩存,設置age為2
  4. 寫請求1更新緩存,設置age為1

執行結果就是,資料庫里age被設置2,緩存里的age被設置成1,導致數據不一致,此方案不可行。

2.3 先刪除緩存,再更新資料庫

如果同時來了兩個併發讀寫請求,執行過程是這樣的:

  1. 寫請求刪除了緩存
  2. 讀請求查詢緩存沒數據,然後查詢資料庫,再把數據寫到緩存中
  3. 寫請求更新資料庫

執行結果是,緩存中是舊數據,而資料庫里是新數據,導致數據不一致,此方案不可行。

2.4 先更新資料庫,再刪除緩存

這種方案,在併發寫的時候,不會出問題。因為都是先更新資料庫再刪除緩存,不會出現不一致的情況。

但是在併發讀寫的時候,還是有可能出現數據不一致。

  1. 讀請求查詢緩存沒數據,然後查詢資料庫
  2. 寫請求更新資料庫,刪除緩存
  3. 讀請求回寫緩存

執行結果是,緩存中是舊數據,而資料庫里是新數據,導致數據不一致。

其實這種情況出現的概率很低,寫緩存比寫資料庫快出幾個量級,讀寫緩存都是記憶體操作,速度非常快。

遇到了這種極端場景,我們也需要做一下兜底方案,緩存都要設置過期時間。這種方案屬於數據的弱一致性和最終一致性,而不是強一致性。

3. 總結與思考

有讀者可能會好奇,為什麼不在更新緩存和資料庫方法上加上事務註解,實現強一致性,這麼哪種方案都不會有問題。

是的,當我們的服務只在一臺機器上,加本地事務是可行的。但是工作中,我們會把一個服務部署到幾十臺、上百台機器上,有時候為了應對更極端的查詢請求,又在Redis緩存加一層本地緩存,這時候我們再用本地事務是不起作用的。

一份數據在多台機器上,存在多個副本,為了實現強一致性,我們也可以使用分散式事務。這樣一來更新緩存操作將會變得非常複雜,得不償失。

但是在另外的一些場景,比如更新訂單狀態、更新用戶資產,這種場景,我們無論付出多大代價也要實現數據的強一致性,具體實現方案一般有以下幾種:

  1. 二階段提交
  2. TCC
  3. 本地消息表
  4. MQ事務消息
  5. 分散式事務中間件

下篇文章咱們再一起詳細的分析這幾種方案優缺點。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 聲明 這個程式只是用來演示查看後臺和對接後臺的原理和過程,供代碼學習參考,請勿濫用! 起因 因為上海疫情,我們所有的活動都得線上上完成,作為一個新時代好學生,我該做點什麼了。 我的學校選擇的上課平臺是希沃的立知課堂,教師端是希沃白板電腦客戶端,學生端是網頁端、微信小程式端、移動設備軟體端。 觀察後臺 ...
  • 日常開發系統中通常需要對接多個系統,需要用到適配器模式。 例如:支付方式就涉及多個系統對接。 國際慣例,先引入概念。 適配器模式: 提到適配器自然就能想到手機用的電源適配器。 他的作用就是將220V交流電轉換成手機使用的5V直流電。 適配器作用:將一個介面轉換成另外一個介面,已符合客戶的期望。 軟體 ...
  • 目錄 一.簡介 二.效果演示 三.源碼下載 四.猜你喜歡 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 基礎 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 轉場 零基礎 O ...
  • 算術運算符 +:正值運算符 / 加法運算符 int x = 4 + 22; -:負值運算符 / 減法運算符 int y = 61 - 23; *:乘法運算符 int num = 5; printf("%i\n", num * num); // 輸出 25 /:除法運算符 C 語言裡面的 整數除法 是 ...
  • Java 零錢通項目 項目要求:使用 Java 開發 零錢通項目 , 可以完成收益入賬,消費,查看明細,退出系統等功能。 1. 面向過程 1)首先是這樣一個菜單界面 由於不管選擇什麼,都需要至少執行一次,所以考慮do...while迴圈結構。 boolean loop = true; do { Sy ...
  • 前言 學習eureka的過程中,配置了本地多節點,發現節點間數據不同步,自己找源碼發現eureka.client.service-url.default-zone 配置有誤,default-zone應該為defaultZone,該配置配置在EurekaClientConfigBean中,如果未配置d ...
  • 目錄 一.簡介 二.效果演示 三.源碼下載 四.猜你喜歡 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 基礎 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 轉場 零基礎 O ...
  • 今天給大家分享 3 個比較冷門的知識 第一個:神奇的字典鍵 Python學習交流Q群:906715085#### some_dict = {} some_dict[5.5] = "Ruby" some_dict[5.0] = "JavaScript" some_dict[5] = "Python" ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...