使用EventBus + Redis發佈訂閱模式提升業務執行性能(下)

来源:https://www.cnblogs.com/hunanzp/archive/2020/03/07/12434529.html
-Advertisement-
Play Games

前言 上一篇博客上已經實現了使用EventBus對具體事件行為的分發處理,某種程度上也算是基於事件驅動思想編程了。但是如上篇博客結尾處一樣,我們源碼的執行效率依然達不到心裡預期。在下單流程里我們明顯可以將部分行為進行非同步處理,提升下單操作的執行效率。 Redis基礎命令 Redis有兩種方式可支持我 ...


前言

上一篇博客上已經實現了使用EventBus對具體事件行為的分發處理,某種程度上也算是基於事件驅動思想編程了。但是如上篇博客結尾處一樣,我們源碼的執行效率依然達不到心裡預期。在下單流程里我們明顯可以將部分行為進行非同步處理,提升下單操作的執行效率。

Redis基礎命令

Redis有兩種方式可支持我們實現MQ功能,1、使用列表(List)相關命令特性;2、使用publish、subscribe命令特性;
這裡我是採取列表相關命令實現。

使用列表(List)相關命令的特性實現

  • 壓入數據(發佈消息)
    使用列表(List)的 LPUSH RPUSH 命令可以從列表左邊和右邊壓入數據;

LPUSH
將一個或多個值插入到列表頭部(此處可以將列表想象成一個從左到右的鏈表數據結構,LPUSH就是將指定的值插入最左側!)

 如下命令,將多個元素壓入list1的頭部(最左側)

LPUSH list1 測試1 測試2

執行結果如下:

 

 

 

上面是寫入多個元素,我們也可以寫入單個元素

LPUSH list1 測試3

  

 

 

 

需要留意,每次執行完LPUSH後,Redis會返回當前列表的長度。

RPUSH
在指定列表的尾部(相當於一個鏈表的最右側)添加單個或多個元素

如下命令,還是在list1上添加多個元素,並查看執行後的list1元素信息

RPUSH list 測試4 測試5

  

 

 

 

同理,RPUSH也可直接寫入單個元素,和LPUSH一樣。

 

  • 拉取數據(消費數據)
    這裡的拉取數據不單單是讀取List內的元素,而是將元素從列表中取出來

BLPOP
移出並獲取列表的第一個元素(從左至右), 如果列表沒有元素會阻塞當前線程,直到等待超時或發現可彈出元素為止。

如下命令,從list1這個列表獲取從左至右第一個元素,在100秒內如果獲取則結束阻塞,否則阻塞到100秒之後。

BLPOP list1 100

  

執行結果如下:

 

 

需要留意的是BLPOP命令如果拉取到數據則會返回兩行數據,1行為列表的key名稱,1行為獲取到的元素值。如果直到阻塞結束都沒有獲取到元素值則直接返回命令執行超時。如下圖:

 

 

BRPOP
移出並獲取列表的最後一個元素(從左至右), 如果列表沒有元素會阻塞當前線程直到等待超時或發現可彈出元素為止。該命令與BLPOP除了獲取的元素位置不同,其他特性全部一致。

LPOP
移出並獲取列表的第一個元素(從左至右),如獲取到元素則返回元素信息,沒有元素則立即返回null。

如下命令:

LPOP list1

  

 

 

RPOP
移出並獲取列表的最後一個元素(從左至右),如獲取到元素則返回元素信息,沒有元素則立即返回null。該命令與LPOP除了獲取的元素位置不同其他特性全部一致;

RPOPLPUSH
移除列表的最後一個元素(最右側的元素),並將該元素添加到另一個列表並返回。該命令如獲取到元素則返回元素信息,否則返回錯誤信息。

可以通過RPOPLPUSH這個命令的特性對MQ內一致性要求較高的業務進行處理,在從列表獲取元素成功後將該元素添加到一個備份列表,在業務處理完畢後再從備份列表將該元素刪除。
執行下麵命令測試下:

RPOPLPUSH list1 listback

  

 

 

BRPOPLPUSH
從列表中彈出一個值,將彈出的元素插入到另外一個列表中並返回它; 如果列表沒有元素會阻塞列表直到等待超時或發現可彈出元素為止。

該命令其實就是在BRPOP的基礎上將LPUSH的功能加上了,依舊也保留了指定超時時間內未獲取到元素則阻塞線程。
執行下麵命令測試下:

BRPOPLPUSH list1 listback 10

  

執行結果如下:

 

 

完善代碼

基於上面Redis的相關命令,我們再完善下上篇博客的代碼。這裡我們需要新增一個控制台啟動項,將它作為消費服務,原來的控制台即訂單保存的控制台作為消息發佈的服務。
下單代碼更改為下麵的樣子:

        /// <summary>
        /// 非同步方式觸發訂單相關事件
        /// </summary>
        public static void AsynEventHandle()
        {
            Guid userId = Guid.NewGuid();
            Stopwatch stopwatch = new Stopwatch();
            stopwatch.Start();

            var order = new OrderModel()
            {
                CreateTime = DateTime.Now,
                Id = Guid.NewGuid(),
                Money = (decimal)300.00,
                Number = 1,
                ProductName = "鮮花一束",
                UserId = userId
            };
            Console.WriteLine($"模擬存儲訂單【採取Redis做消息隊列的非同步方式】");
            Thread.Sleep(1000);

            FullRedis fullRedis = new FullRedis("127.0.0.1:6379", "", 1);
            //這裡嘗試過使用redis 的訂閱發佈模式,在執行發佈命令時候發現值但凡出現空格或者"符號則會異常...         
            fullRedis.LPUSH("orders", new OrderModel[] { order });

            stopwatch.Stop();
            Console.WriteLine($"下單總耗時:{stopwatch.ElapsedMilliseconds}毫秒");
            Console.ReadLine();
        }

  

可以看到,我們已經將事件匯流排相關代碼給移除了,上面代碼除了向Redis的隊列(List)里寫入元素外就只是對訂單進行了持久化動作,所以看代碼就知道執行效率的提升了。
接下來,看消費服務的代碼。

        static void Main(string[] args)
        {
            XTrace.UseConsole();
            Console.WriteLine("進入Redis消息訂閱者模式訂單消息推送訂閱者客戶端!");

            EventBus eventBus = new EventBus();
            eventBus.EventRegister(typeof(OrderCreateEventNotifyHandle), typeof(OrderCreateEventData));
            eventBus.EventRegister(typeof(OrderCreateEventStockLockHandle), typeof(OrderCreateEventData));

            FullRedis fullRedis = new FullRedis("127.0.0.1:6379", "", 1);
            fullRedis.Log = XTrace.Log;
            fullRedis.Timeout = 30000;
            OrderModel order = null;
            while (order == null)
            { 
                order = fullRedis.BLPOP<OrderModel>("orders", 20);
                if (order != null)
                {
                    Console.WriteLine($"得到訂單信息:{JsonConvert.SerializeObject(order)}");
                    //執行相關事件
                    eventBus.Trigger(new OrderCreateEventData()
                    {
                        Order = order,
                    });
                    //再次設置為null方便迴圈讀取
                    order = null;
                }
                  
            }
            Console.ReadLine();
        }

  

消費服務首先從Redis里通過BLPOP從orders列表中獲取元素,再觸發事件匯流排,執行訂單保存相關業務處理。

最終看下執行效率如何?
消息發佈的執行效率(訂單保存)

 

消息消費

 

可以看到目前消息發佈的執行效率下單總耗時間為1170毫秒,我們再改為同步的測試下結果:

 

可以看到,同步執行的結果是3035毫秒。

小結

兩種方式相差了將近2000毫秒~ 而且後續如果再繼續擴展訂單存儲相關處理的話同步執行的響應時間會更加拉長,而採取Redis MQ的方式配合事件匯流排我們可以將整個業務拆分為獨立的應用,採取分散式的方式提高響應效率,同時事件匯流排的加入方便我們後續業務的擴展。

消息發佈端將訂單信息寫入到列表後如果消息消費者在拉取到數據後業務執行過程中代碼出現異常導致無法滿足業務的完整性如何處理

答:可以使用上述Redis命令中的RPOPLPUSH或BRPOPLPUSH在拉取元素後寫入到一個備份的列表中,在我們的邏輯代碼執行完畢後在將備份列表中的該元素值移除。

上述代碼已發佈到Github,有需要的自行下載。

地址為:https://github.com/QQ897878763/OrderRedisSample

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一.前言 在講解 str / bytes /unicode區別之前首先要明白位元組和字元的區別,請參考:bytearray/bytes/string區別 中對位元組和字元有清晰的講解,最重要是明白: 字元str是給人看的,例如:文本保存的內容,用來操作的; 位元組bytes是給電腦看的,例如:二進位數據 ...
  • 一.目標 SpringBoot整合Mybatis對單表的增、刪、改、查操作 二.開發工具及項目環境 IDE: IntelliJ IDEA 2019.3 SQL: Navicat for MySQL 三.基礎環境配置 1. 創建資料庫: demodb 2. 創建數據表及插入數據 3. 必備Maven依 ...
  • 做Android手機系統或App測試的過程中, 如果碰到了bug,開發一般會需要測試人員提供當時的bug截圖, 如何用Python 批處理腳本, 快速實現截圖呢? 準備階段 1. adb shell screencap p /sdcard/a.png 命令, 可以實現手機截圖並保存到/sdcard/ ...
  • 基於 Redis 實現 CAS 操作 Intro 在 .NET 里併發情況下我們可以使用 來實現 CAS (Compare And Swap) 操作,在分散式的情景下很多時候我們都會使用 Redis ,最近在改之前做的一個微信小游戲項目,之前是單機運行的,有些數據存儲是基於記憶體的,直接基於對象操作的 ...
  • Main函數代碼 using System; namespace ConsoleApp4 { class Program { public static void Main(string[] args) { Console.WriteLine(args[0]); Console.WriteLine( ...
  • VS2019 for MAC已經發佈很長時間了,本以為項目移過去很麻煩,一直沒有動作,最近呆家裡快發黴了,決定研究研究,沒想到一句代碼都不需要動,直接完功,這下可以生產了。同學們可以放心整了。 ...
  • HSQL 是一種輕量級的基於 .NET Core 的資料庫對象關係映射「ORM」框架 HSQL 是一種可以使用非常簡單且高效的方式進行資料庫操作的一種框架,通過簡單的語法,使資料庫操作不再成為難事。目前支持的資料庫有 MySql、SQLServer。 安裝方法 Install-Package HSQ ...
  • 問題: 其實也不是問題了 算是優化吧 當做net項目時 不是前後臺分離時 需要寫很多的前端頁面 這時我們就會用到很多的ui插件js,css文件 (這裡指的第三方的ui插件不是自己寫的js,css) 比如bootstrap 當我們新建一個mvc項目時 會自動下載bootstrap 但是用的多了之後 j ...
一周排行
    -Advertisement-
    Play Games
  • 示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後,項目結構如下所示: MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread] 特性用於需要與 COM 組件交互的應用程式,尤其是依賴單線程模型(如 Windows Forms 應用程式)的組件。在 STA 模式下,線程擁有自己的消息迴圈,這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • 在WinForm中使用全局異常捕獲處理 在WinForm應用程式中,全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理,可以有效地捕獲並處理未預見的異常,從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • 前言 給大家推薦一款開源的 Winform 控制項庫,可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫,同時也提供了工具類庫、擴展 ...
  • 說明 該文章是屬於OverallAuth2.0系列文章,每周更新一篇該系列文章(從0到1完成系統開發)。 該系統文章,我會儘量說的非常詳細,做到不管新手、老手都能看懂。 說明:OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友,請關註我吧(*^▽^*) ...
  • 一、下載安裝 1.下載git 必須先下載並安裝git,再TortoiseGit下載安裝 git安裝參考教程:https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit,Git客戶端,32/6 ...
  • 前言 在項目開發過程中,理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼,還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程:Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 一:背景 1. 講故事 前段時間有位朋友找到我,說他的窗體程式在客戶這邊出現了卡死,讓我幫忙看下怎麼回事?dump也生成了,既然有dump了那就上 windbg 分析吧。 二:WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死,入口門檻很低,後續往下分析就不一定了,不管怎麼說先用 !clrsta ...
  • 前言 人工智慧時代,人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API,工具不僅易於集成,還具備高效處理能力。 本文將介紹一款如何利用這些API,為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...