關於Box Anemometer的安裝配置遇到的幾個坑

来源:https://www.cnblogs.com/ajiangg/archive/2018/01/10/8258926.html
-Advertisement-
Play Games

Box Anemometer是一個非常不錯的MySQL慢查詢可視化工具平臺,具體就不多詳述了,官網是https://github.com/box/Anemometer 最近動自己動手搭了一個,具體搭建過程,參考了http://www.cnblogs.com/xuanzhi201111/p/41288 ...


 

 Box Anemometer是一個非常不錯的MySQL慢查詢可視化工具平臺,具體就不多詳述了,官網是https://github.com/box/Anemometer

最近動自己動手搭了一個,具體搭建過程,參考了http://www.cnblogs.com/xuanzhi201111/p/4128894.html以及官網的說明文檔

下麵把其中遇到的一些坑記錄於此:

1、.資源規劃:

192.168.17.205  Box Anemometer伺服器,安裝httpd服務、php、用於存儲Anemometer慢查詢數據的MySQL服務。

192.168.16.21/22/23/24/25/**** 需要被監控的MySQL伺服器,需要安裝percona-toolkit,並配置使用pt-query-digest收集數據的相關腳本任務。

2、安裝過程及遇到的坑:2.1、之前192.168.17.205上就編譯安裝過一個MySQL5.7.20服務

於是按照網上的教程先yum 安裝了httpd,再yum安裝php,然後配置Anemometer。

結果一直報錯,連接不上MySQL伺服器。我懷疑是yum安裝php預設的Mysql客戶端驅動太低導致的。所以重新採用編譯安裝php,編譯配置如下:

./configure 
--prefix=/data/php 
--enable-fpm 
--with-fpm-user=daemon 
--with-fpm-group=daemon 
--with-config-file-path=/usr/local/php/etc 
--with-mysql=mysqlnd 
--with-mysqli=mysqlnd 
--with-pdo-mysql=mysqlnd 
--with-iconv --with-iconv-dir 
--with-freetype-dir 
--with-jpeg-dir 
--with-png-dir 
--with-gd 
--with-zlib 
--with-libxml-dir 
--with-curl 
--with-mhash 
--with-xmlrpc 
--with-mcrypt 
--with-openssl 
--with-apxs2=/usr/sbin/apxs 
--enable-xml 
--disable-rpath 
--enable-bcmath 
--enable-shmop 
--enable-sysvsem 
--enable-inline-optimization 
--enable-mbregex 
--enable-mbstring 
--enable-gd-native-ttf 
--enable-ftp 
--enable-pcntl 
--enable-sockets 
--enable-zip 
--enable-soap 
--disable-debug 
--disable-ipv6 
--with-gettext 
--enable-calendar 
--enable-dom 
--enable-opcache=no  

結果還是報錯,仍然連接不上mysql伺服器。但錯誤信息有所變化,最終解決方案是:關閉Selinux。

2.2、關於Anemometer資料庫的授權以及被監控資料庫的用戶授權:

2.2.1、Anemometer用於保存收集過來的慢查詢數據的MySQL資料庫192.168.17.205的授權如下:

GRANT SELECT, UPDATE ON `slow_query_log`.* TO 'app_anemometer_rw'@'localhost'

對應的配置如下:

[root@oracle conf]# pwd
/var/www/html/anemometer/conf
[root@oracle conf]# vi config.inc.php 

<?php
$conf['datasources']['localhost'] = array(
        'host'  => '127.0.0.1',
        'port'  => 3306,
        'db'    => 'slow_query_log',
        'user'  => 'app_anemometer_r',
        'password' => 'Your@StrongPassword',
        'tables' => array(
                'global_query_review' => 'fact',
                'global_query_review_history' => 'dimension'
        ),
        'source_type' => 'slow_query_log'
);

2.2.2、另外該資料庫還需要給各被監控資料庫的腳本程式授權:

GRANT SELECT, INSERT, UPDATE, DELETE ON `slow_query_log`.* TO 'app_anemometer_rw'@'192.168.16.2%'

2.2.3、各被監控的資料庫需要授權Anemometer程式訪問,用來獲取執行計劃等數據:

GRANT SELECT, SUPER ON *.* TO 'app_anemometer_r'@'192.168.17.205'

對應的配置(/var/www/html/anemometer/conf/config.inc.php)如下:

3、通過配置,終於能打開首頁了,但首頁顯示的SQL長度實在是太短,只有20個字元,導致沒法從這個列表上清楚的知道到底是哪個查詢:

這個也可以通過修改/var/www/html/anemometer/conf/config.inc.php文件來配置:

預設是取最左邊20位,改成想要的長度即可。

4、最後附上各MySQL伺服器中用於收集慢查詢日誌的python腳本:

#!/usr/bin/env python2
#-*- coding: utf-8 -*-
import subprocess

PATH='/bin:/usr/bin'
LOG='/log/slow.log'
SERVER_HOST='192.168.17.205'
DB='slow_query_log'
TAB1='global_query_review'
TAB2='global_query_review_history'
MYSQL_USER='app_anemometer_rw'
MYSQL_PASSWD='Your@StrongPassword'
hostname='MySQL-M-16-21'
print MYSQL_PASSWD
cmd='pt-query-digest --user='+MYSQL_USER+' --password='+ MYSQL_PASSWD + ' --port=3306 --review h='+SERVER_HOST+',D='+DB+',t='+TAB1+'  --history h='+SERVER_HOST+',D='+DB+',t='+TAB2 +' --no-report --limit=0% --filter=" \$event->{Bytes} = length(\$event->{arg}) and \$event->{hostname}=\\"'+hostname+'\\"" ' +LOG

print cmd
subprocess.Popen(cmd, stdout=subprocess.PIPE, shell=True)

4.1 由於anemometer伺服器是通過上面python腳本所配置的hostname定義來反過來訪問各被監控的伺服器,用於獲取執行計劃等相關信息。

所以,如果hostname如果配置的不是Ip,那麼還需在anemometer伺服器192.168.17.205上配置hosts文件:

[root@oracle conf]# vi /etc/hosts

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.16.21 MySQL-M-16-21

4.2 可能預設配置下,該平臺所顯示的內容並不是自己想要的

例如單個查詢的過去90天歷史記錄里,它是以ts_min為group by的,這會只顯示一條數據,而不是每天的數據,我改成了ts_max。

另外,ts_cnt也是Sum出來的,如果我們5分鐘收集一次日誌,這個結果完全不是想要的,我這裡添加了一行配置:'query_cnt' => 'MAX(ts_cnt)',

並且將history_defaults和report_defaults的table_fields配置中將ts_cnt改為了query_cnt:

通過以上配置,系統所顯示的值基本與預期相符。

本文鏈接:http://www.cnblogs.com/ajiangg/p/8258926.html


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 伺服器斷電重啟導致備份生產環境的恢複目錄庫無法進行啟動,提示Ora-01092常式終止。強行斷開連接 ...
  • Transaction Isolation Levels InnoDB支持SQL1992標準中的四種隔離級別:READ UNCOMMITTED、READ COMMITTED、REPEATABLE READ、SERIALIZABLE。預設的隔離級別是REPEATABLE READ。 通過SET TRA ...
  • 導讀:2015年8月,國務院印發《促進大數據發展行動綱要》,首次明確提出建設數據強國;2015年10月,黨的十八屆五中全會提出“實施國家大數據戰略”,將大數據上升為國家戰略。其後,國家政府部門、科技研究院、互聯網大企業、傳統工業企業等不斷發佈戰略藍皮書,對未來進行規劃佈局。 神奇的大數據 現在的社會 ...
  • Locking Reads 在同一個事務中,如果你先查詢數據,隨後對相關數據進行插入或修改,那麼在標準的SLELECT中不會給出足夠的保護。在你查詢期間另一個事務可以更新或者刪除相同的行。InnoDB提供兩種類型的加鎖讀: SELECT ... LOCK IN SHARE MODE 給讀到的每一行都 ...
  • Consistent Nonlocking Reads 一致讀意味著InnoDB用多版本來提供一個查詢資料庫某個時間點的快照。這種查詢可以看到在當前世界點之前事務提交的改變,看不到此後提交的改變,更看不到未提交的改變。這個規則有一種例外情況是它可以看到同一個事務中在這個查詢之前的改變。這種異常就造成 ...
  • 共用鎖和排它鎖 InnoDB實現了標準的行級鎖,包括兩種類型:共用鎖(S)和排它鎖(X) 一個共用鎖(S)允許事務持有這種鎖來讀取一行 一個排它鎖(X)允許事務持有這種鎖來修改或刪除一行 如果事務T1對行r持有一個共用鎖(S),那麼來自其它事務T的對於行r的鎖的請求處理如下: 如果T2請求的是共用鎖 ...
  • 本次講到where字句中經常用到的集中較為複雜的搜索條件,包括組合的查詢條件、IN運算符、NOT運算符、LIKE運算符和相關通配符。 學習本節需要用到一下兩張表: 以下是各複雜條件的查詢: 我們再講一個ESCAPE定義轉義符: 在使用LIKE關鍵字進行模糊查詢的時候,“%”,“_”,“[]”,單獨出 ...
  • 在電腦環境變數中加入兩個系統變數LANG=zh_CN.GBK和NLS_LANG=SIMPLIFIED CHINESE_CHINA.ZHS16GBK,然後重啟plsql即可。 要和 SELECT * FROM V$NLS_PARAMETERS;保持一致 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...