俠夢說pinpoint--左側服務地圖調用量和WasOn過濾

来源:https://www.cnblogs.com/hyq0823/archive/2019/12/05/11992178.html
-Advertisement-
Play Games

前言 這篇文章主要是從pinpoint web界面入手,我們的目標是弄清楚兩個問題: 1、 pinpoint左側服務地圖上的調用量數據是怎麼查詢的? 2、界面查詢條件WasOnly是什麼意思? 左側服務地圖調用量來源 從下圖可以看出,A顯示被USER調用299次,線上數值代表著調用量。 我們F12跟 ...


前言

  • 這篇文章主要是從pinpoint-web界面入手,我們的目標是弄清楚兩個問題:

    • 1、 pinpoint左側服務地圖上的調用量數據是怎麼查詢的?
    • 2、界面查詢條件WasOnly是什麼意思?

左側服務地圖調用量來源

    從下圖可以看出,A顯示被USER調用299次,線上數值代表著調用量。

file

我們F12跟蹤一下介面地址:

http://webip:port/getServerMapDataV2.pinpoint?applicationName=A
&from=1575337980000&to=1575338040000
&callerRange=1&calleeRange=1
&bidirectional=false&wasOnly=false
&serviceTypeName=SPRING_BOOT
&_=1575337947426

web上顯示的數據,都是從hbase查詢出來的,所以跟蹤後端pinpoint-web工程源代碼,我們可以定位到hbase的一張表:ApplicationMapStatisticsCallee_Ver2。

調用者(caller)和被調用者callee

rowKey生成規則
  • 細節可以跟蹤源代碼瞭解
rowKey生成規則:
ApplicationMapStatisticsUtils.makeRowKey(...);
Qualify列名生成規則:
ApplicationMapStatisticsUtils.makeColumnName(...);

我們都知道,界面查詢的時候可以選擇Inboud和outboud,並且最大顯示4X4的關係圖,
所以在pinpoint設計的時候,就選擇存儲雙向關係:(目的就是構造界面左側的服務地圖)。比如:

TOMCAT ===》調用 MYSQL則對調用者生成如下消息:

emeroad-app (TOMCAT) -> MySQL_DB_ID (MYSQL)[10.25.141.69:3306]

而對被調用者MYSQL生成:

 MySQL (MYSQL) <- emeroad-app (TOMCAT)[localhost:8080]
hbase存儲

file

hbase存儲結構如上圖所示,因為都是二進位,所以列1,其實也是byte,而不是固定的字元名。

#### 什麼時候存儲這個雙向關係?

  • 知道數據的底層存儲結構了,下麵,我們繼續來跟蹤,它是如何存進來的,我們搜索一下引用,發現,有5個地方調用了這個存儲的api。
    file

  • 簡單明瞭,那我們就逐個擊破把!

①SpanChunkHandler中

  • 在chunk的結構中,要求有spanEventList這個數據,(因為調用量 和它內部的EVENTBo 條數 是1:1),並且需要滿足isRecordStatistics記錄條件。

  • 當滿足這兩個條件時,就會生成 A->B, B<--A, 兩個關係,使其左側服務地圖調用量+1。
    其他位置邏輯類似,篇幅原因,這裡不再細說。

  • ② SpanHandler,112行

  • ③ SpanHandler,117行

  • ④ SpanHandler,127行

  • ⑤ SpanHandler,189行

#### wasOnly的含義

  • 還是通過上述的介面,我們可以跟蹤到,請求的參數,被封裝到了一個這些參數都被封裝到了SearchOption這個類。
private final int callerSearchDepth;
private final int calleeSearchDepth;
private final LinkSelectorType linkSelectorType;
private final boolean wasOnly;

怎麼去看呢?這裡提供一種思路,可能不適合所有人,大家參考一下。

從定義的變數,去理解它的含義,然後去“猜”。

callerSearchDepth: 調用者查詢深度。
calleeSearchDepth:被調用者搜索深度。

除了wasOnly 和linkSelectorType不知道具體含義,上面兩個應該就是用來控制搜索深度的。那我們繼續跟蹤代碼:
這裡通過判斷是否是Was,新建了一個處理器。也就是說具體使用方法應該是在這個:
callerLinkDataMapProcessor 類中。

if (searchOption.isWasOnly()) {
    callerLinkDataMapProcessor = new WasOnlyProcessor();
}

看到這個類的accept方法相信大家,應該會有所敏感,這應該是用來判斷過濾條件的.
file

  • 從代碼中可以看出,這裡和Application有關,通過getServiceType
    的兩個方法來判斷是否過濾。

  • 有了這兩個方法,就好辦了,我們直接找它的實現就行了。
    根據依賴關係,我們定位到了ServiceTypeFactory這個工廠類、DefaultServiceType及ServiceTypeProperty,具體查找方式可以通過觀察這幾個類瞭解,關係如下:

file

結論

  • 粗略的理解:WAS ONLY會過濾類似於資料庫、或者是位置的節點,讓界面展示清楚一些。

  • 用程式思維理解是:它會過濾掉serviceType為Unknown或者是Terminal的節點,具體哪些節點會有這兩個屬性呢,我想大家可以去自行研究研究。

  • 我這裡貼一個Unknown的,這個只有一個類型。
// Callee node that agent hasn't been installed
ServiceType UNKNOWN = of(1, "UNKNOWN", RECORD_STATISTICS);
  • 研究的時候,貼的圖文太多,我整理了word,這裡就不再多敘述了,有需要的小伙伴,可以加我,我發給你。歡迎關註俠夢的開發筆記

    歡迎來公眾號【俠夢的開發筆記】 一起交流進步


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Java編程思想總結(一)對象導論 1.1 抽象過程 萬物皆對象。 程式是對象的集合(即:類),他們通過發送消息(調用方法)來告知彼此要做的。 每個對象都有自己的由其他對象所構成的存儲(引用其他對象或基本類型,即組合)。 每個對象都擁有其類型。每個類最重要的區別於其他類的特征就是“可以發送什麼樣的消 ...
  • 一、基礎 ArrayList不是線程安全的,多線程建議使用Vector或者CopyOnWriteArrayList; 底層實現是Object數組。預設容量DEFAULT_CAPACITY為10,最大數組大小MAX_ARRAY_SIZE為Integer.MAX_VALUE-8; 實現了RandomAc ...
  • 在posix標準推出後,socket在各大主流OS平臺上都得到了很好的支持。而Golang是自帶runtime的跨平臺編程語言,Go中提供給開發者的socket API是建立在操作系統原生socket介面之上的。但golang 中的socket介面在行為特點與操作系統原生介面有一些不同。本文將對結合 ...
  • Problem Description 輸入N個整數順序建立一個單鏈表,將該單鏈表拆分成兩個子鏈表,第一個子鏈表存放了所有的偶數,第二個子鏈表存放了所有的奇數。兩個子鏈表中數據的相對次序與原鏈表一致。 Input 第一行輸入整數N;;第二行依次輸入N個整數。 Output 第一行分別輸出偶數鏈表與奇 ...
  • 一、GC 第一步:判斷對象是否已死?有兩種方法:第一種是引用計數法,即給對象添加一個引用計數器,當被引用時,計數器就+1;當引用失效時,就-1;當計數器為0時,代表對象沒有被引用。但是計數器的缺點就是:對象之間相互引用時導致計數器不為零,無法被回收。第二種方法是可達性分析法,即通過定義一系列的GC ...
  • 解決方法 方法一:換一個埠 若仍然想要使用該埠,則可以將占用該埠的進程殺死即可。 方法二:殺死占用該埠的進程 若仍然想要使用該埠,則可以將占用該埠的進程殺死即可 查找埠被占用的進程id netstat -nao | findstr “埠號” 查詢埠號對應的進程 tasklist | ...
  • 想象一下,程式員沒有WIFI會怎樣? 程式員沒有網路肯定會寸步難行! 但是對於Python程式員來說,只要附近有熱點,分分鐘就能蹭網成功! 想要WIFI破解,python+字典,這是必少不了的。熱點加弱口令也是核心。字典自己加精,你的字典有強大,你能破解的WIFI就越多,提供兩種方法,一般人學到一種 ...
  • 1.os.path.exists()既可以判斷文件是否存在,又可以判斷文件夾是否存在 2.os.path.isfile()判斷文件是否存在 3.os.path.isdir()判斷文件夾是否存在 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...