EventBus/EventQueue 再思考

来源:https://www.cnblogs.com/weihanli/archive/2020/05/23/12941919.html
-Advertisement-
Play Games

EventBus/EventQueue 再思考 Intro 之前寫過兩篇文章,造輪子系列的 /`EventQueue EvenStore` 可能有點誤解,有興趣可以參考 /, 最近把 Event 相關的邏輯做了一個重構,修改 ,引入了 ,重新設計了 Event 相關的組件 重構後的 Event Ev ...


EventBus/EventQueue 再思考

Intro

之前寫過兩篇文章,造輪子系列的 EventBus/EventQueue,回想起來覺得當前的想法有點問題,當時對 EvenStore 可能有點誤解,有興趣可以參考 https://www.cnblogs.com/weihanli/p/implement-a-simple-event-bus.html/https://www.cnblogs.com/weihanli/p/implement-event-queue.html

最近把 Event 相關的邏輯做了一個重構,修改 EventStore,引入了 IEventHandlerFactory,重新設計了 Event 相關的組件

重構後的 Event

  • Event: 事件的抽象定義
  • EventHandler:事件處理器抽象定義
  • EventHandlerFactory:事件處理器工廠,用來根據事件類型獲取事件處理器(新增)
  • EventPublisher:事件發佈器,用於事件發佈
  • EventSubscriber:事件訂閱器,用於管理事件的訂閱
  • EventSubscriptionManager:事件訂閱管理器,在 EventSubscriber 的基礎上增加了一個根據事件類型獲取事件訂閱器類型的方法
  • EventBus:事件匯流排,由 EventPubliser 和 EventSubscriber 組合而成,用來比較方便的做事件發佈和訂閱
  • EventQueue:事件隊列,希望某些消息順序處理的時候可以考慮用 EventQueue 的模式
  • EventStore:事件存儲,事件的持久化存儲(在之前的版本里,EventStore 實際作用是一個 EventSubscriptionManager,在最近的版本更新中已修改)

以上 EventSubscriberEventSubscriptionManager 一般不直接用,一般用 EventBus 來處理即可

EventHandlerFactory

這次引入了 EventHandlerFactory 用來抽象獲取 EventHandler 的邏輯,原來的設計里是在處理 Event 的時候獲取 EventHandler 的類型,然後從依賴註入框架中獲取或創建新的 event handler 實例之後再調用 EventHandler 的 Handle 方法處理事件,有一些冗餘

使用 EventHandlerFactory 之後就可以直接獲取一個 EventHandler 實例集合,具體是實例化還是從依賴註入中獲取就由 EventHandlerFactory 來決定了,這樣就可以對依賴註入很友好,對於基於記憶體的簡單 EventBus 來說,在服務註冊之後就不需要再調用 Subscribe 去顯式訂閱了,因為再註冊服務的時候就已經隱式實現了訂閱的邏輯,這樣實際就不需要 EventSubscriptionManager 來管理訂閱了,訂閱信息都在依賴註入框架內部,比如說 CounterEvent,要獲取它的訂閱信息,我只需要從依賴註入框架中獲取 IEventHandler<CounterEvent> 的實例即可,實際就代替了原先 “EventStoreInMemory”,現在的 EventSubscriptionManagerInMemory

基於依賴註入的 EventHandlerFactory 定義:

public sealed class DependencyInjectionEventHandlerFactory : IEventHandlerFactory
{
    private readonly IServiceProvider _serviceProvider;

    public DependencyInjectionEventHandlerFactory(IServiceProvider serviceProvider = null)
    {
        _serviceProvider = serviceProvider ?? DependencyResolver.Current;
    }

    public ICollection<IEventHandler> GetHandlers(Type eventType)
    {
        var eventHandlerType = typeof(IEventHandler<>).MakeGenericType(eventType);
        return _serviceProvider.GetServices(eventHandlerType).Cast<IEventHandler>().ToArray();
    }
}

如果不使用依賴註入,也可以根據 IEventSubscriptionManager 訂閱信息來實現:

public sealed class DefaultEventHandlerFactory : IEventHandlerFactory
{
    private readonly IEventSubscriptionManager _subscriptionManager;
    private readonly ConcurrentDictionary<Type, ICollection<IEventHandler>> _eventHandlers = new ConcurrentDictionary<Type, ICollection<IEventHandler>>();
    private readonly IServiceProvider _serviceProvider;

    public DefaultEventHandlerFactory(IEventSubscriptionManager subscriptionManager, IServiceProvider serviceProvider = null)
    {
        _subscriptionManager = subscriptionManager;
        _serviceProvider = serviceProvider ?? DependencyResolver.Current;
    }

    public ICollection<IEventHandler> GetHandlers(Type eventType)
    {
        var eventHandlers = _eventHandlers.GetOrAdd(eventType, type =>
        {
            var handlerTypes = _subscriptionManager.GetEventHandlerTypes(type);
            var handlers = handlerTypes
                .Select(t => (IEventHandler)_serviceProvider.GetServiceOrCreateInstance(t))
                .ToArray();
            return handlers;
        });
        return eventHandlers;
    }
}

EventQueue Demo

來看一下 EventQueue 的示例,示例基於 asp.net core 的,定義了一個 HostedService 來實現一個 EventConsumer 來消費 EventQueue 中的事件信息

EventConsumer 定義如下:

public class EventConsumer : BackgroundService
{
    private readonly IEventQueue _eventQueue;
    private readonly IEventHandlerFactory _eventHandlerFactory;

    public EventConsumer(IEventQueue eventQueue, IEventHandlerFactory eventHandlerFactory)
    {
        _eventQueue = eventQueue;
        _eventHandlerFactory = eventHandlerFactory;
    }

    protected override async Task ExecuteAsync(CancellationToken stoppingToken)
    {
        while (!stoppingToken.IsCancellationRequested)
        {
            var queues = await _eventQueue.GetQueuesAsync();
            if (queues.Count > 0)
            {
                await queues.Select(async q =>
                        {
                            var @event = await _eventQueue.DequeueAsync(q);
                            if (null != @event)
                            {
                                var handlers = _eventHandlerFactory.GetHandlers(@event.GetType());
                                if (handlers.Count > 0)
                                {
                                    await handlers
                                            .Select(h => h.Handle(@event))
                                            .WhenAll()
                                        ;
                                }
                            }
                        })
                        .WhenAll()
                    ;
            }

            await Task.Delay(1000, stoppingToken);
        }
    }
}

定義 PageViewEventPageViewEventHandler,用來記錄和處理請求訪問記錄

public class PageViewEvent : EventBase
{
}

public class PageViewEventHandler : EventHandlerBase<PageViewEvent>
{
    public static int Count;

    public override Task Handle(PageViewEvent @event)
    {
        Interlocked.Increment(ref Count);
        return Task.CompletedTask;
    }
}

事件很簡單,事件處理也只是增加了 PageViewEventHandler 內定義的 Count。

服務註冊:

// 註冊事件核心組件
// 會註冊 EventBus、EventHandlerFactory、EventQueue 等
services.AddEvents()
    // 註冊 EventHanlder 
    .AddEventHandler<PageViewEvent, PageViewEventHandler>()
    ;
// 註冊 EventQueuePubliser,預設註冊的 IEventPublisher 是 EventBus
services.AddSingleton<IEventPublisher, EventQueuePublisher>();
// 註冊 EventConsumer
services.AddHostedService<EventConsumer>();

事件發佈,定義了一個中間件來發佈 PageViewEvent,定義如下:

// pageView middleware
app.Use((context, next) =>
        {
            var eventPublisher = context.RequestServices.GetRequiredService<IEventPublisher>();
            eventPublisher.Publish(new PageViewEvent());

            return next();
        });

然後定義一個介面來獲取上面定義的 PageViewEventHandler 中的 Count

[Route("api/[controller]")]
public class EventsController : ControllerBase
{
    [HttpGet("pageViewCount")]
    public IActionResult Count()
    {
        return Ok(new { Count = PageViewEventHandler.Count });
    }
}

運行起來之後,訪問幾次介面,看上面的介面返回 Count 是否會增加,正常的話每訪問一次介面就會增加 1,併發訪問問題也不大,因為每個事件都是順序處理的,即使併發訪問也沒有關係,事件發佈之後,在隊列里都是順序處理的,這也就是引入事件隊列的目的(好像上面的原子遞增沒什麼用了...) 如果沒看到了增加,稍等一會兒再訪問試試,事件處理會遲到,但總會處理,畢竟是非同步處理的,有些延遲很正常,而且上面我們還有一個 1s 的延遲

More

更多關於上述 Event 相關的信息可以參考代碼: https://github.com/WeihanLi/WeihanLi.Common/tree/dev/src/WeihanLi.Common/Event

作者水平有限,如果上述有哪些不對的地方還望指出,萬分感謝

Reference


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 概念內部狀態、外部狀態、享元池角色 & UMLDemo: 編輯器圖片重用 - JavaReference概念享元模式(Flyweight Pattern),是以 共用 的方式,對 大量細粒度對象 重用,來減少記憶體的使用(避免大量重覆地創建、銷毀對象)。名稱中的Flyweight,是搏擊比賽中體重級別... ...
  • 聲明:這是在windows10上進行kafka_2.13demo搭建時的過程記錄,提供給同學們參考。 1.jdk先要裝一下。 2.先安裝zookeeper,這裡不贅述,貼一個鏈接 https://blog.csdn.net/ring300/article/details/80446918。記得測試一 ...
  • 前言 本文的文字及圖片來源於網路,僅供學習、交流使用,不具有任何商業用途,版權歸原作者所有,如有問題請及時聯繫我們以作處理。 用Python也差不多一年多了,Python應用最多的場景還是Web快速開發、爬蟲、自動化運維:寫過簡單網站、寫過自動發帖腳本、寫過收發郵件腳本、寫過簡單驗證碼識彆腳本。 爬 ...
  • 1、緩存穿透 原因: 指定查詢一個一定不存在的數據,我們去查詢某個商品,但是緩存中沒有,那麼就是直接查詢資料庫,高併發下假如同時100萬請求同時查詢,那麼他就會直接穿過緩存去查詢資料庫,那麼它將會導致資料庫崩潰無法工作【一直查詢一個不存在的結果,導致緩存一直不命中,全部來查詢資料庫。導致資料庫壓力過 ...
  • 最近是微軟開了Build 2020大會,由於疫情原因,改成了線上舉行,Build大會上,C 公佈9.0版本。 我個人對於C 的更新向來都是喜聞樂見,樂於接受的,對於博客園上某些人天天嘲諷C 只會增加語法糖的人,我向來對他們不屑一顧,認為他們是井底之蛙。 因此我仔細看了微軟發的文章 "Welcome ...
  • /// <summary /// C List轉換成DataTable /// </summary /// <param name="list" </param /// <returns </returns public static System.Data.DataTable ListToData ...
  • 0.前言 在上一篇中,我們知道瞭如何使用SqlSugar,但是也只是簡單的瞭解瞭如何使用,仿佛是套著鐐銬行走,這明顯不符合一個合格的程式員應有的素養。所以,這一篇我們將對其進行深挖,探究其背後的秘密。 1. 花式映射 在實際開發中,程式中的實體類和資料庫的表名並不能完全一致,造成的原因有很多,例如說 ...
  • 以前需要反編譯的時候,一直都是用的神器 Reflector。但畢竟還是有點不方便,因為要從 VS 切換到另一個工具。而且,Reflector 現在收費了。 然而現在才發現,原來 VS 已經自帶反編譯功能了,不愧是宇宙第一 IDE。 工具 → 選項 → 文本編輯器 → c 高級 → 啟用導航到反編譯源 ...
一周排行
    -Advertisement-
    Play Games
  • Dapr Outbox 是1.12中的功能。 本文只介紹Dapr Outbox 執行流程,Dapr Outbox基本用法請閱讀官方文檔 。本文中appID=order-processor,topic=orders 本文前提知識:熟悉Dapr狀態管理、Dapr發佈訂閱和Outbox 模式。 Outbo ...
  • 引言 在前幾章我們深度講解了單元測試和集成測試的基礎知識,這一章我們來講解一下代碼覆蓋率,代碼覆蓋率是單元測試運行的度量值,覆蓋率通常以百分比表示,用於衡量代碼被測試覆蓋的程度,幫助開發人員評估測試用例的質量和代碼的健壯性。常見的覆蓋率包括語句覆蓋率(Line Coverage)、分支覆蓋率(Bra ...
  • 前言 本文介紹瞭如何使用S7.NET庫實現對西門子PLC DB塊數據的讀寫,記錄了使用電腦模擬,模擬PLC,自至完成測試的詳細流程,並重點介紹了在這個過程中的易錯點,供參考。 用到的軟體: 1.Windows環境下鏈路層網路訪問的行業標準工具(WinPcap_4_1_3.exe)下載鏈接:http ...
  • 從依賴倒置原則(Dependency Inversion Principle, DIP)到控制反轉(Inversion of Control, IoC)再到依賴註入(Dependency Injection, DI)的演進過程,我們可以理解為一種逐步抽象和解耦的設計思想。這種思想在C#等面向對象的編 ...
  • 關於Python中的私有屬性和私有方法 Python對於類的成員沒有嚴格的訪問控制限制,這與其他面相對對象語言有區別。關於私有屬性和私有方法,有如下要點: 1、通常我們約定,兩個下劃線開頭的屬性是私有的(private)。其他為公共的(public); 2、類內部可以訪問私有屬性(方法); 3、類外 ...
  • C++ 訪問說明符 訪問說明符是 C++ 中控制類成員(屬性和方法)可訪問性的關鍵字。它們用於封裝類數據並保護其免受意外修改或濫用。 三種訪問說明符: public:允許從類外部的任何地方訪問成員。 private:僅允許在類內部訪問成員。 protected:允許在類內部及其派生類中訪問成員。 示 ...
  • 寫這個隨筆說一下C++的static_cast和dynamic_cast用在子類與父類的指針轉換時的一些事宜。首先,【static_cast,dynamic_cast】【父類指針,子類指針】,兩兩一組,共有4種組合:用 static_cast 父類轉子類、用 static_cast 子類轉父類、使用 ...
  • /******************************************************************************************************** * * * 設計雙向鏈表的介面 * * * * Copyright (c) 2023-2 ...
  • 相信接觸過spring做開發的小伙伴們一定使用過@ComponentScan註解 @ComponentScan("com.wangm.lifecycle") public class AppConfig { } @ComponentScan指定basePackage,將包下的類按照一定規則註冊成Be ...
  • 操作系統 :CentOS 7.6_x64 opensips版本: 2.4.9 python版本:2.7.5 python作為腳本語言,使用起來很方便,查了下opensips的文檔,支持使用python腳本寫邏輯代碼。今天整理下CentOS7環境下opensips2.4.9的python模塊筆記及使用 ...