實時監控Cat之旅~分散式消息樹的實現原理與測試

来源:http://www.cnblogs.com/lori/archive/2016/03/01/5230981.html
-Advertisement-
Play Games

大眾點評的老吳在InfoQ上講了Cat之後,有不少同仁開始關註這個實時監控系統,但學習的文章甚少,在GitHub上也是一言代過,給我們這些開發人員留下了N多個疑問,一時間不知道去哪裡問,向誰去問了,通常的百度和谷歌也不好使了,不過,好在經理推薦的QQ群幫了忙,認識了一些cat的前輩,經過他們的努力和


大眾點評的老吳在InfoQ上講了Cat之後,有不少同仁開始關註這個實時監控系統,但學習的文章甚少,在GitHub上也是一言代過,給我們這些開發人員留下了N多個疑問,一時間不知道去哪裡問,向誰去問了,通常的百度和谷歌也不好使了,不過,好在經理推薦的QQ群幫了忙,認識了一些cat的前輩,經過他們的努力和我們共同的執著,終於把這塊難啃的骨頭啃動了!

參考代碼:https://github.com/chinaboard/PureCat

完成的分散式消息樹

分散式消息樹實現的理論

Cat上下文,它與其它數據上下文,Http上下文,文件上下文的意思是一樣的,都是指一種對象的封裝,在cat里它的上下文由三個ID組成,ROOT,Parent和Child,他們類似於資料庫里的聯合主鍵,在讓多個消息進行關聯時,需要通過這些鍵值,我們在跨網路記錄日誌時,也需要把這三個對象傳過去,在目標伺服器上進行解析,然後這兩個消息就組成了一個消息樹了。

CatContext上下文內容

    /// <summary>
    /// cat上下文
    /// </summary>
    public class CatContext
    {
        /// <summary>
        /// 消息根ID
        /// </summary>
        public string CatRootId { get; set; }
        /// <summary>
        /// 上級消息ID
        /// </summary>
        public string CatParentId { get; set; }
        /// <summary>
        /// 當前消息ID
        /// </summary>
        public string CatChildId { get; set; }
        public string ContextName { get; set; }

        public CatContext(string contextName)
        {
            ContextName = contextName ?? Environment.MachineName;
        }
        public CatContext()
            : this(null)
        {

        }

    }

在進行分散式調用時,和java版的一樣,用到了LogRemoteCallClient和LogRemoteCallServer這兩個方法,前者是消息發起者調用,生成context後,將它序列化傳到另外一個節點,這個節點在進行事務處理時會將自己包裹到調用方的事務時在,這也就是分散式消息樹的實現原理。

需要註意的地方

在Cat里,有域的概念,即domain,我們在分散式消息樹的幾台伺服器,必須處在同一個域下!

代碼這樣實現的

A節點核心代碼

 /* client1 -> catContext -> client2
             * 
             */
            #region Cat實時監控

            PureCat.PureCat.Initialize();
            var context = PureCat.PureCat.DoTransaction("Do", "Test", func: () =>
           {

               PureCat.PureCat.NewEvent("Do", "Test");
               return PureCat.PureCat.LogRemoteCallClient("zzl");
           });

            var url = "http://localhost:4532/home/index";
            var handler = new HttpClientHandler() { };
            using (var http = new HttpClient(handler))
            {
                http.DefaultRequestHeaders.Add("catContext", Lind.DDD.Utils.SerializeMemoryHelper.SerializeToJson(context));
                var response = http.GetAsync(url).Result;
                var staus = response.IsSuccessStatusCode;
            }

            Console.ReadLine();
            #endregion

B節點核心代碼

       string reusult = Request.Headers.GetValues("catContext").FirstOrDefault();
            var cat = Lind.DDD.Utils.SerializeMemoryHelper.DeserializeFromJson<PureCat.Context.CatContext>(reusult);
            PureCat.PureCat.DoTransaction("Do", "Add", () =>
            {
                PureCat.PureCat.LogRemoteCallServer(cat);
                PureCat.PureCat.LogEvent("Do", "Add", "0", "hello distribute api123");
                PureCat.PureCat.LogError(new Exception());
            });

本文代碼只是大叔的測試DEMO,之後還會對它進行封裝與優化,敬請期待!

感謝您的閱讀!


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • HTTP 協議可能是現在 Internet 上使用得最多、最重要的協議了,越來越多的 Java 應用程式需要直接通過 HTTP 協議來訪問網路資源。在 JDK 的 java.net 包中已經提供了訪問 HTTP 協議的基本功能:HttpURLConnection。 HttpURLConnection
  • 最近我在用梯度下降演算法繪製神經網路的數據時,遇到了一些演算法性能的問題。梯度下降演算法的代碼如下(偽代碼): Python 1 2 3 def gradient_descent(): # the gradient descent code plotly.write(X, Y) 一般來說,當網路請求 pl
  • Java mkdirs()創建目錄實例 Java deleteDir() 刪除目錄實例 Java 如何判斷目錄是否為空 Java 使用file.isHidden() 方法來判斷文件是否隱藏 Java 獲取目錄大小實例 Java 查找指定目錄下的文件 Java 如何獲取文件的上級目錄 Java 獲取目
  • 示例闡述C++中的文件操作
  • 1.getgamedesc.sh 功能:插入gamedesc.txt文本中的,以“,”分割的第1列數據gid和第6列數據desc,到線網mysql資料庫中(當欄位$desc不為空時才執行插入)。 db_param="-h127.0.0.1 -uigame -pigame_admin" while r
  • 指針即地址。 1. 指針與變數。 2. 指針與數組。 3. 指針與字元串。 4. 指針與函數:指針函數(返回值為指針的函數)與函數指針(指向函數的指針)。 5. 指針數組與指向指針的指針。 6. 關於二維數組的指針 當我們定義int a[3][4] ;int (*p)[4]; 時,這時 p 與 a
  • 1 <?xml version="1.0" encoding="gbk"?> 2 <ehcache xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:noNamespaceSchemaLocation="ehcache.xsd"> 3
  • Linux shell腳本編程(二) 1 練習:求100以內所有偶數之和; 2 使用至少三種方法實現; 3 4 示例1: 5 6 #!/bin/bash 7 # 8 declare -i sum=0 #聲明一個變數求和,初始值為0 9 10 for i in $(seq 0 2 100); do 1
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...