使用EventBus + Redis發佈訂閱模式提升業務執行性能(下)

来源:https://www.cnblogs.com/hunanzp/archive/2020/03/07/12434529.html
-Advertisement-
Play Games

前言 上一篇博客上已經實現了使用EventBus對具體事件行為的分發處理,某種程度上也算是基於事件驅動思想編程了。但是如上篇博客結尾處一樣,我們源碼的執行效率依然達不到心裡預期。在下單流程里我們明顯可以將部分行為進行非同步處理,提升下單操作的執行效率。 Redis基礎命令 Redis有兩種方式可支持我 ...


前言

上一篇博客上已經實現了使用EventBus對具體事件行為的分發處理,某種程度上也算是基於事件驅動思想編程了。但是如上篇博客結尾處一樣,我們源碼的執行效率依然達不到心裡預期。在下單流程里我們明顯可以將部分行為進行非同步處理,提升下單操作的執行效率。

Redis基礎命令

Redis有兩種方式可支持我們實現MQ功能,1、使用列表(List)相關命令特性;2、使用publish、subscribe命令特性;
這裡我是採取列表相關命令實現。

使用列表(List)相關命令的特性實現

  • 壓入數據(發佈消息)
    使用列表(List)的 LPUSH RPUSH 命令可以從列表左邊和右邊壓入數據;

LPUSH
將一個或多個值插入到列表頭部(此處可以將列表想象成一個從左到右的鏈表數據結構,LPUSH就是將指定的值插入最左側!)

 如下命令,將多個元素壓入list1的頭部(最左側)

LPUSH list1 測試1 測試2

執行結果如下:

 

 

 

上面是寫入多個元素,我們也可以寫入單個元素

LPUSH list1 測試3

  

 

 

 

需要留意,每次執行完LPUSH後,Redis會返回當前列表的長度。

RPUSH
在指定列表的尾部(相當於一個鏈表的最右側)添加單個或多個元素

如下命令,還是在list1上添加多個元素,並查看執行後的list1元素信息

RPUSH list 測試4 測試5

  

 

 

 

同理,RPUSH也可直接寫入單個元素,和LPUSH一樣。

 

  • 拉取數據(消費數據)
    這裡的拉取數據不單單是讀取List內的元素,而是將元素從列表中取出來

BLPOP
移出並獲取列表的第一個元素(從左至右), 如果列表沒有元素會阻塞當前線程,直到等待超時或發現可彈出元素為止。

如下命令,從list1這個列表獲取從左至右第一個元素,在100秒內如果獲取則結束阻塞,否則阻塞到100秒之後。

BLPOP list1 100

  

執行結果如下:

 

 

需要留意的是BLPOP命令如果拉取到數據則會返回兩行數據,1行為列表的key名稱,1行為獲取到的元素值。如果直到阻塞結束都沒有獲取到元素值則直接返回命令執行超時。如下圖:

 

 

BRPOP
移出並獲取列表的最後一個元素(從左至右), 如果列表沒有元素會阻塞當前線程直到等待超時或發現可彈出元素為止。該命令與BLPOP除了獲取的元素位置不同,其他特性全部一致。

LPOP
移出並獲取列表的第一個元素(從左至右),如獲取到元素則返回元素信息,沒有元素則立即返回null。

如下命令:

LPOP list1

  

 

 

RPOP
移出並獲取列表的最後一個元素(從左至右),如獲取到元素則返回元素信息,沒有元素則立即返回null。該命令與LPOP除了獲取的元素位置不同其他特性全部一致;

RPOPLPUSH
移除列表的最後一個元素(最右側的元素),並將該元素添加到另一個列表並返回。該命令如獲取到元素則返回元素信息,否則返回錯誤信息。

可以通過RPOPLPUSH這個命令的特性對MQ內一致性要求較高的業務進行處理,在從列表獲取元素成功後將該元素添加到一個備份列表,在業務處理完畢後再從備份列表將該元素刪除。
執行下麵命令測試下:

RPOPLPUSH list1 listback

  

 

 

BRPOPLPUSH
從列表中彈出一個值,將彈出的元素插入到另外一個列表中並返回它; 如果列表沒有元素會阻塞列表直到等待超時或發現可彈出元素為止。

該命令其實就是在BRPOP的基礎上將LPUSH的功能加上了,依舊也保留了指定超時時間內未獲取到元素則阻塞線程。
執行下麵命令測試下:

BRPOPLPUSH list1 listback 10

  

執行結果如下:

 

 

完善代碼

基於上面Redis的相關命令,我們再完善下上篇博客的代碼。這裡我們需要新增一個控制台啟動項,將它作為消費服務,原來的控制台即訂單保存的控制台作為消息發佈的服務。
下單代碼更改為下麵的樣子:

        /// <summary>
        /// 非同步方式觸發訂單相關事件
        /// </summary>
        public static void AsynEventHandle()
        {
            Guid userId = Guid.NewGuid();
            Stopwatch stopwatch = new Stopwatch();
            stopwatch.Start();

            var order = new OrderModel()
            {
                CreateTime = DateTime.Now,
                Id = Guid.NewGuid(),
                Money = (decimal)300.00,
                Number = 1,
                ProductName = "鮮花一束",
                UserId = userId
            };
            Console.WriteLine($"模擬存儲訂單【採取Redis做消息隊列的非同步方式】");
            Thread.Sleep(1000);

            FullRedis fullRedis = new FullRedis("127.0.0.1:6379", "", 1);
            //這裡嘗試過使用redis 的訂閱發佈模式,在執行發佈命令時候發現值但凡出現空格或者"符號則會異常...         
            fullRedis.LPUSH("orders", new OrderModel[] { order });

            stopwatch.Stop();
            Console.WriteLine($"下單總耗時:{stopwatch.ElapsedMilliseconds}毫秒");
            Console.ReadLine();
        }

  

可以看到,我們已經將事件匯流排相關代碼給移除了,上面代碼除了向Redis的隊列(List)里寫入元素外就只是對訂單進行了持久化動作,所以看代碼就知道執行效率的提升了。
接下來,看消費服務的代碼。

        static void Main(string[] args)
        {
            XTrace.UseConsole();
            Console.WriteLine("進入Redis消息訂閱者模式訂單消息推送訂閱者客戶端!");

            EventBus eventBus = new EventBus();
            eventBus.EventRegister(typeof(OrderCreateEventNotifyHandle), typeof(OrderCreateEventData));
            eventBus.EventRegister(typeof(OrderCreateEventStockLockHandle), typeof(OrderCreateEventData));

            FullRedis fullRedis = new FullRedis("127.0.0.1:6379", "", 1);
            fullRedis.Log = XTrace.Log;
            fullRedis.Timeout = 30000;
            OrderModel order = null;
            while (order == null)
            { 
                order = fullRedis.BLPOP<OrderModel>("orders", 20);
                if (order != null)
                {
                    Console.WriteLine($"得到訂單信息:{JsonConvert.SerializeObject(order)}");
                    //執行相關事件
                    eventBus.Trigger(new OrderCreateEventData()
                    {
                        Order = order,
                    });
                    //再次設置為null方便迴圈讀取
                    order = null;
                }
                  
            }
            Console.ReadLine();
        }

  

消費服務首先從Redis里通過BLPOP從orders列表中獲取元素,再觸發事件匯流排,執行訂單保存相關業務處理。

最終看下執行效率如何?
消息發佈的執行效率(訂單保存)

 

消息消費

 

可以看到目前消息發佈的執行效率下單總耗時間為1170毫秒,我們再改為同步的測試下結果:

 

可以看到,同步執行的結果是3035毫秒。

小結

兩種方式相差了將近2000毫秒~ 而且後續如果再繼續擴展訂單存儲相關處理的話同步執行的響應時間會更加拉長,而採取Redis MQ的方式配合事件匯流排我們可以將整個業務拆分為獨立的應用,採取分散式的方式提高響應效率,同時事件匯流排的加入方便我們後續業務的擴展。

消息發佈端將訂單信息寫入到列表後如果消息消費者在拉取到數據後業務執行過程中代碼出現異常導致無法滿足業務的完整性如何處理

答:可以使用上述Redis命令中的RPOPLPUSH或BRPOPLPUSH在拉取元素後寫入到一個備份的列表中,在我們的邏輯代碼執行完畢後在將備份列表中的該元素值移除。

上述代碼已發佈到Github,有需要的自行下載。

地址為:https://github.com/QQ897878763/OrderRedisSample

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一.前言 在講解 str / bytes /unicode區別之前首先要明白位元組和字元的區別,請參考:bytearray/bytes/string區別 中對位元組和字元有清晰的講解,最重要是明白: 字元str是給人看的,例如:文本保存的內容,用來操作的; 位元組bytes是給電腦看的,例如:二進位數據 ...
  • 一.目標 SpringBoot整合Mybatis對單表的增、刪、改、查操作 二.開發工具及項目環境 IDE: IntelliJ IDEA 2019.3 SQL: Navicat for MySQL 三.基礎環境配置 1. 創建資料庫: demodb 2. 創建數據表及插入數據 3. 必備Maven依 ...
  • 做Android手機系統或App測試的過程中, 如果碰到了bug,開發一般會需要測試人員提供當時的bug截圖, 如何用Python 批處理腳本, 快速實現截圖呢? 準備階段 1. adb shell screencap p /sdcard/a.png 命令, 可以實現手機截圖並保存到/sdcard/ ...
  • 基於 Redis 實現 CAS 操作 Intro 在 .NET 里併發情況下我們可以使用 來實現 CAS (Compare And Swap) 操作,在分散式的情景下很多時候我們都會使用 Redis ,最近在改之前做的一個微信小游戲項目,之前是單機運行的,有些數據存儲是基於記憶體的,直接基於對象操作的 ...
  • Main函數代碼 using System; namespace ConsoleApp4 { class Program { public static void Main(string[] args) { Console.WriteLine(args[0]); Console.WriteLine( ...
  • VS2019 for MAC已經發佈很長時間了,本以為項目移過去很麻煩,一直沒有動作,最近呆家裡快發黴了,決定研究研究,沒想到一句代碼都不需要動,直接完功,這下可以生產了。同學們可以放心整了。 ...
  • HSQL 是一種輕量級的基於 .NET Core 的資料庫對象關係映射「ORM」框架 HSQL 是一種可以使用非常簡單且高效的方式進行資料庫操作的一種框架,通過簡單的語法,使資料庫操作不再成為難事。目前支持的資料庫有 MySql、SQLServer。 安裝方法 Install-Package HSQ ...
  • 問題: 其實也不是問題了 算是優化吧 當做net項目時 不是前後臺分離時 需要寫很多的前端頁面 這時我們就會用到很多的ui插件js,css文件 (這裡指的第三方的ui插件不是自己寫的js,css) 比如bootstrap 當我們新建一個mvc項目時 會自動下載bootstrap 但是用的多了之後 j ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...