Grafana+Telegraf+Influxdb監控Tomcat集群方案

来源:https://www.cnblogs.com/smallSevens/archive/2018/07/30/9382686.html
-Advertisement-
Play Games

前一段時間自家養的幾隻貓經常出問題，由於沒有有效的監控預警手段，以至於問題出現或者許久一段時間才會被通知到。凌晨一點這個鍋可誰都不想背，為此基於目前的情況搭建了以下這麼一套監控預警系統。 ...


前言

前一段時間自家養的幾隻貓經常出問題，由於沒有有效的監控預警手段，以至於問題出現或者許久一段時間才會被通知到。凌晨一點這個鍋可誰都不想背，為此基於目前的情況搭建了以下這麼一套監控預警系統。

相關軟體

  • Nginx：代理訪問 Grafana
  • Grafana： 可視化面板(Dashboard)，有著非常漂亮的圖表和佈局展示
  • Influxdb：開源的時間序列資料庫，適用於記錄度量，事件及執行分析
  • Telegraf：收集系統和服務的統計數據
  • Docker：開源的應用容器引擎，讓開發者可以打包他們的應用以及依賴包到一個可移植的容器中

監控架構

GTI監控預警系統，架構流程說明：

  • 第一步：數據採集，Telegraf 採集 Tomcat 相關參數數據
  • 第二步：數據存儲，Influxdb 存儲 Telegraf 採集的數據
  • 第三步：數據可視化，Grafana 配置 Tomcat 監控面板
  • 第四步：預警通知，配置釘釘、郵件等預警

安裝配置

這裡只對Grafana、Telegraf、Influxdb、Tomcat 做相應的安裝說明，Nginx 以及 Docker 請自行查閱資料。

Grafana

Grafana只是一個接入數據源的可視化面板，這裡為了方便，我們選擇Docker安裝。

mkdir grafana
ID=$(id -u)
docker run -d --user $ID --name=grafana  --volume "$PWD/grafana:/var/lib/grafana" -p 3000:3000 grafana/grafana
# 如果生產環境配置，最好提前配置好功能變數名稱
docker run -d --user $ID --name=grafana --volume "$PWD/data:/var/lib/grafana" -p 3000:3000 -e "GF_SERVER_ROOT_URL=http://monitor.52itstyle.com" grafana/grafana

執行成功以後，執行以下命令：

docker ps

如果出現grafana運行容器說明安裝成功。

查看容器相關參數：

docker inspect docker.io/grafana/grafana

進入：

docker exec -it grafana /bin/sh

Grafana的預設配置文件grafana.ini位於容器中的/etc/grafana，這個文件是映射不出來的。不過可以先創建並運行一個容器，拷貝出來重新創建運行容器。

參數說明(這裡截取了部分重點參數)：

##################### Grafana 幾個重要的參數(參考一下) #####################
[paths]
# 存放臨時文件、session以及sqlite3資料庫的目錄
;data = /var/lib/grafana

# 存放日誌的地方
;logs = /var/log/grafana

# 存放相關插件的地方
;plugins = /var/lib/grafana/plugins

#################################### Server ####################################
[server]
# 預設協議 支持(http, https, socket)
;protocol = http

# 預設埠
;http_port = 3000

# 這裡配置訪問地址，如果使用了反向代理請配置功能變數名稱，發送告警通知的時候作為訪問地址
root_url = http://grafana.52itstyle.com

#################################### Database ####################################
[database]

# 預設使用的資料庫sqlite3，位於/var/lib/grafana目錄下麵
;path = grafana.db

#################################### Session ####################################
[session]
# session 存儲方式，預設是file即可  Either "memory", "file", "redis", "mysql", "postgres", default is "file"
;provider = file

#################################### SMTP / Emailing ##########################
[smtp]
# 郵件伺服器配置，自行修改配置
enabled = true
host = smtp.mxhichina.com:465
user = admin@52itstyle.com
# If the password contains # or ; you have to wrap it with trippel quotes. Ex """#password;"""
password = 123456
;cert_file =
;key_file =
;skip_verify = false
from_address = admin@52itstyle.com
# 這裡不要設置中文，否則會發送失敗
from_name = Grafana

Influxdb

創建並運行容器

docker run -d -p 8083:8083 -p 8086:8086 -e ADMIN_USER="root" -e INFLUXDB_INIT_PWD="root" -e PRE_CREATE_DB="telegraf" --name influxdb tutum/influxdb:latest

各個參數含義：

-d：容器在後臺運行

--name：容器名稱

-e：指定環境變數，容器中可以使用該環境變數 

-p：將容器內埠映射到宿主機埠，格式為 宿主機埠:容器內埠；8083是influxdb的web管理工具埠，8086是influxdb的HTTP API埠

執行成功以後，執行以下命令：

docker ps

如果出現influxdb運行容器說明安裝成功。

訪問地址：http://ip:8083/

Telegraf

docker pull telegraf

把telegraf相關配置拷貝到宿機

docker cp telegraf:/etc/telegraf/telegraf.conf ./telegraf

採集Tomcat數據：

如果想監控多個Tomcat，這裡配置多個[[inputs.tomcat]]即可，但是一定要配置不同的tags標識。

[[inputs.tomcat]]
url = "http://192.168.1.190:8080/manager/status/all?XML=true"
# Tomcat訪問賬號密碼 必須配置
username = "tomcat"
password = "tomcat"
timeout = "5s"
# 標識Tomcat名稱、根據實際項目部署情況而定
[inputs.tomcat.tags]
host = "blog"

[[inputs.tomcat]]
url = "http://192.168.1.190:8081/manager/status/all?XML=true"
# Tomcat訪問賬號密碼 必須配置
username = "tomcat"
password = "tomcat"
timeout = "5s"
# 標識Tomcat名稱、根據實際項目部署情況而定
[inputs.tomcat.tags]
host = "bbs"

採集數據到influxdb：

[[outputs.influxdb]]
      # urls = ["udp://localhost:8089"] # UDP endpoint example
      urls = ["http://localhost:8086"] # required，這個url改成自己host
      ## The target database for metrics (telegraf will create it if not exists).
      database = "telegraf" # 這個會在influx庫創建一個庫

把配置文件複製到容器：

docker cp telegraf.conf telegraf:/etc/telegraf/telegraf.conf

重啟telegraf服務：

docker restart docker

Tomcat

由於telegraf收集Tomcat相關數據需要配置訪問許可權，這裡我們選擇Tomcat7做配置說明。

修改位於conf下的tomcat-users.xml文件：

<tomcat-users>
<user username="tomcat" password="tomcat" roles="manager-gui,manager-script,manager-jmx,manager-status"/>
</tomcat-users>

重啟Tomcat容器，訪問以下地址：

http://ip:8080/manager/status/all?XML=true

如果出現以上界面，說明配置成功。

監控配置

依次啟動Tomcat、Influxdb、Telegraf、Grafana完成後，我們進入Grafana後臺管理進行相關配置。

配置Influxdb數據源：

選擇 datasources/Add datasource

輸入正確的HTTP地址以及資料庫賬號密碼，點擊保存，如果出現綠色提示框，說明配置成功。

配置Tomcat儀錶盤：

選擇 dashboard/import

這裡有三種方式導入面板：

  • 選擇輸入官方面板ID或者URL
  • 直接複製黏貼JSON格式代碼
  • 導入第三方面板JSON格式文件

這裡我們導入事先自己定製保存的Tomcat監控面板，最後點擊導入保存。

如果不出意外，將會是下圖的樣子。

告警配置

前期做了這麼多，我們的最終目的是為了提前預警通知，在系統即將發生災難之前作出相應的準備調整。這裡我們以Tomcat的線程數量閾值作為預警通知。

點擊線程面板-選擇編輯：

配置相關參數：

1、Alert名稱，可以自定義。
2、執行的頻率，這裡我選擇每60s檢測一次。
3、判斷標準，預設是avg，這裡是下拉框，自己按需求選擇。
4、query（A,5m,now），字母A代表選擇的metrics中設置的sql，也可以選擇其它在metrics中設置的，但這裡是單選。5m代表從現在起往之前的五分鐘，即5m之前的那個點為時間的起始點，now為時間的結束點，此外這裡可以自己手動輸入時間。
5、設置的預警臨界點，這裡手動輸入，和6是同樣功能，6可以手動移動，兩種操作是等同的。

配置預警信息以及通知方式：

這裡我們選擇的是郵件預警通知，但是要提前進行配置，詳見一開始grafana.ini中 SMTP / Emailing 相關參數配置。

點擊發送測試，提示成功會發送一份告警Demo到指定郵箱：

總結

講道理，這一套東西還是挺強大的。特別是對於中小公司來說，各種成熟的開源組間一整合完美搭建出一套監控系統，時間成本、人力成本、技術成本可以降到最低。

參考文檔

大家安裝過程中，版本可能不盡相同，相關頁面展示會不一致，但是不會影響最終功能呈現。

http://docs.grafana.org/

https://docs.influxdata.com/influxdb/

https://docs.influxdata.com/telegraf/

https://blog.52itstyle.com/archives/2014/

https://blog.52itstyle.com/archives/2029/

https://github.com/influxdata/telegraf/pull/3277


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • ios開發遇到的問題
    運行後界面空白，Xcode跳轉到APPDelegate.swift文件提示如下 第一種可能原因： 做輸出口後在代碼中重新命名了輸出口 解決方法： 右鍵控制項關閉輸出口的連接，變回＋號，將它重新連到代碼的var...處鬆開。 或者直接刪除代碼代碼重新做輸出口。 第二種可能原因： 修改了ViewContr ...
  • 【代碼筆記】Web-ionic tab(選項卡)
    一，效果圖。 二，代碼。 <!DOCTYPE html> <html> <head> <meta charset="utf-8"> <title>Todo</title> <meta name="viewport" content="initial-scale=1, maximum-scale=1, ...
  • seajs的原理以及基本使用
    seajs模塊化開發 模塊化開發，把整個文件分割成一個一個小文件。 使用方法 使用方法特別簡單，首先在官網中下載sea.js，然後在頁面中引入。 index.html part1.js 有一些需要註意的地方 另外這一種判斷使用哪個模塊的 require.async 方法用來在模塊內部非同步載入模塊，並 ...
  • phantom.js - HTML To PDF
    import phantom from 'phantom'; const pageToPdf = (url) => { phantom.create().then((ph) { ph.createPage().then((page) => { page.open(url).then((status) ...
  • JavaScript函數（三）——閉包及作用域
    閉包 概念 只有函數內部的子函數才能讀取局部變數，所以閉包可以理解成“定義在一個函數內部的函數“。在本質上，閉包是將函數內部和函數外部連接起來的橋梁 例子 作用：比如在一個函數中嵌套一個函數，通過閉包可以讓嵌套函數訪問到包裹它的函數的局部變數。 封裝 閉包陷阱 總結 優點：靈活方便，封裝 缺點：空間 ...
  • Flex 佈局知識點梳理
    傳統的佈局方案，在針對特殊佈局時會很不方便，比如垂直居中，把一個容器等分為N列等等。自從 Flex 出現以後，這些都迎刃而解了，本文對Flex相關內容做一個簡單梳理。 ...
  • nativefier - 快速把任意網頁生成桌面應用程式
    使用前端技術開發桌面應用的技術已經相當成熟了，像早先的 NW.js，如今很火的 Electron 等，都可以輕鬆實現。今天給大家分享的 nativefier 就是基於 Electron 封裝的，可以幫助你只需要一行命令就可以生成不同平臺的桌面應用程式，非常神奇！ ...
  • 對象（二）——原型與原型鏈
    原型與原型鏈 一. 普通對象與函數對象 JavaScript 中，萬物皆對象！但對象也是有區別的。分為普通對象和函數對象，Object 、Function 是 JS 自帶的函數對象。下麵舉例說明 在上面的例子中 o1 o2 o3 為普通對象，f1 f2 f3 為函數對象。怎麼區分，其實很簡單，凡是通 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類