十、mysql日誌管理 課程大綱 1、日誌的類型簡介 mysql show variables like '%log_error%';在配置文件中指定錯誤日誌位置。 mysql show variables like '%gen%'; 一般日誌查詢 二進位日誌,記錄修改記錄。 | 日誌文件 | 選項 ...
十、mysql日誌管理
課程大綱
1、MySQL日誌類型簡介
2、MySQL錯誤日誌配置及查看
3、MySQL binlog介紹及管理實戰
4、MySQL 慢查詢日誌設置及管理實戰
1、日誌的類型簡介
mysql> show variables like '%log_error%';在配置文件中指定錯誤日誌位置。
mysql> show variables like '%gen%'; 一般日誌查詢
二進位日誌,記錄修改記錄。
日誌文件 | 選項 | 文件名 | 程式 |
---|---|---|---|
表名稱 | |||
錯誤 | --log-error | host_name.err | N/A |
常規 | --general_log | host_name.log,general_log | N/A |
慢速查詢 | --slow_query_log --long_query_time | host_name-slow. log,slow_log | mysqldumpslow |
二進位 | --log-bin --expire-logs-days | host_name-bin.000001 | mysqlbinlog |
審計 | --audit_log--audit_log_file... | audit.log | N/A |
2、MySQL錯誤日誌配置及查看
錯誤日誌:
配置方法:
[mysqld]
log-error=/data/mysql/mysql.log
查看配置方式:
mysql> show variables like '%log%error%';
作用:
記錄mysql資料庫的一般狀態信息及報錯信息,是我們對於資料庫常規報錯處理的常用日誌。
一般查詢日誌:
配置方法:
[mysqld]
general_log=on
general_log_file=/data/mysql/server2.log
查看配置方式:
show variables like '%gen%';
作用:
記錄mysql所有執行成功的SQL語句信息,可以做審計用,但是我們很少開啟。
3、MySQL binlog介紹及管理實戰
1、二進位日誌都記錄了什麼?
已提交的數據記錄,以event的形式記錄到二進位文件中
2、二進位記錄格式有哪些?
row:行模式,即數據行的變化過程,如將Age=19修改成Age=20的過程事件。(一般都是應用這個模式)
statement:語句模式,如將update語句進行記錄。
mixed:以上兩者的混合模式。
3、三總模式有什麼優缺點?
4、binlog的作用
備份恢復、複製
二進位日誌管理:
1、開啟二進位日誌
set sql_log_bin=0 -->在會話級別修改為臨時關閉
vi /etc/my.cnf
log-bin=/data/mysql/mysql-bin -->在全局打開binlog
2、設置二進位日誌記錄格式(建議是ROW):
配置文件中修改:
binlog-format=ROW
命令行修改
mysql> SET GLOBAL binlog_format = 'STATEMENT';
mysql> SET GLOBAL binlog_format = 'ROW';
mysql> SET GLOBAL binlog_format = 'MIXED';
3、查看binlog設置
show variables like '%binlog%';
查詢二進位日誌方法:
mysql> show variables like 'binlog';
mysql> show binary logs;
mysql> show master status; 最近一次的,當前正在使用的二進位日誌
mysql> show binlog events in 'mysql-bin.000014';
可以通過linux命令行中進程查詢:
[root@centos6-kvm3 mysql]# pwd
/application/mysql/data/mysql
[root@centos6-kvm3 data]# mysqlbinlog mysql-bin.000014 #真正二進位日誌內容
詳細的查詢:日誌內容分析
[root@centos6-kvm3 data]# mysqlbinlog --help | more
[root@centos6-kvm3 data]# mysqlbinlog --base64-output=decode-rows -v mysql-bin.000014
根據需求截取二進位日誌:
[root@centos6-kvm3 data]# mysqlbinlog --start-position=1077 --stop-position=1119 mysql-bin.000014
----
二進位日誌
-----
mkdir /data/binlog -p
chown -R mysql.mysql /data/binlog
vim /etc/my.cnf
log-bin=/data/binlog
binlog_format=row
sync_binlog=1
show binary logs;
show binlog events in 'my-bin.000002'
show master status;
截取獲取二進位日誌,進行恢復:
mysqlbinlog --base64-output=decode-rows -v my-bin.000002 #日誌內容分析
mysqlbinlog --start-position=120 --stop-position=721 my-bin.000002 #截取二進位日誌
mysqlbinlog --start-position=340 --stop-position=721 my-bin.000002 >/tmp/binlog.sql
source /tmp/binlog.sql
二進位日誌管理:
刷新二進位日誌
flush logs
截取二進位日誌
mysqlbinlog --start-position= --stop-position= >a.sql
問題:
1、什麼是事件?
2、什麼是position ?
1、通過截取binlog恢復損壞數據
mysqbinlog --start-position=340 --stop-position=721 my-bin.000002 >/tmp/binlog.sql
2、二進位日誌翻轉實現閃回數據(擴展)
source /tmp/binlog.sql
刪除二進位:
預設情況下,不會刪除舊的日誌文件。
根據存在時間刪除日誌:
SET GLOBAL expire_logs_days = 7;
…或者…
PURGE BINARY LOGS BEFORE now() - INTERVAL 3 day;
根據文件名刪除日誌:
PURGE BINARY LOGS TO 'mysql-bin.000010';
reset master;#重啟啟用一個二進位文件。
4、慢日誌管理:
功能:
slow-log,記錄所有條件內的慢的SQL語句
優化的一種工具日誌。幫我們定位問題。
是將mysql伺服器中影響資料庫性能的相關SQL語句記錄到日誌文件
通過對這些特殊的SQL語句分析,改進以達到提高資料庫性能的目的。
慢日誌設置:
long_query_time : 設定慢查詢的閥值,超出次設定值的SQL即被記錄到慢查詢日誌,預設值為10s
slow_query_log : 指定是否開啟慢查詢日誌
slow_query_log_file : 指定慢日誌文件存放位置,可以為空,系統會給一個預設的文件host_name-slow.log
min_examined_row_limit:查詢檢查返回少於該參數指定行的SQL不被記錄到慢查詢日誌
log_queries_not_using_indexes: 不使用索引的慢查詢日誌是否記錄到索引
配置例子,添加在配置文件中:
slow_query_log=1
slow_query_log_file=/data/slow/slow.log
long_query_time=0.5
log_queries_not_using_indexes
處理慢日誌:
mysqldumpslow命令
mysqldumpslow -s c -t 10 /data/slow/slow.log
mysqldumpslow -s at -t 10 /data/slow/slow.log
這會輸出記錄次數最多的10條SQL語句,
其中:
-s
是表示按照何種方式排序
c、t、l、r分別是按照記錄次數、時間、查詢時間、返回的記錄數來排序。
ac、at、al、ar,表示相應的倒敘。
-t
是top n的意思,即為返回前面多少條的數據;
----------自己擴展工具
pt-query-diagest percona-toolkit
mysqlsla