MySQL Server層四個紀錄檔的實現

2022-03-31 13:03:51

一、MySQL Server層紀錄檔簡介

一個mysql client發起一個連線請求，處理請求的過程如下圖所示：

MySQL紀錄檔是在MySQL server上生成的，不管更改哪個儲存引擎，這些紀錄檔都是需要有的，包括：

錯誤紀錄檔：記錄mysqld服務執行過程中出現的cordump、error、exception等
查詢紀錄檔：記錄使用者端所有的SQL。由於上線專案的SQL太多了，開啟查詢紀錄檔IO太多導致MySQL效率低下，我們一般都不會開啟，只有偵錯時才開啟
二進位制紀錄檔：記錄資料的更改（insert、update、delete、alter …），非常重要，可用於資料恢復，主從複製。主從複製技術依賴於log_bin，主庫所有的更改操作都記錄在log_bin裡，從庫從binlog讀取主庫所有的操作，自己再執行一遍。
慢查詢紀錄檔：記錄了一些執行時間超過指定值的SQL語句，可供開發人員分析耗時SQL，從而針對性優化

檢視紀錄檔相關變數

二、組態檔引數

my.cnf

通過set方法只能影響當前session，如果想要設定永久有效，需要在組態檔上進行設定，然後重啟MySQL服務，就可以永久生效

linux下重啟mysqld服務的命令：sudo service mysqld restart

我們檢視一下組態檔/etc/mysql/my.cnf

給出log-error的路徑就是開啟了log-error，如果不自定義log-error的路徑，預設在data_dir
在開啟log-bin=mysql-bin的同時還要加上server-id=1(表示當前MySQL Server的身份），否則sudo service mysqld restart無法重啟服務
設定過期的時間expire_log_days，因為總有一天磁碟會被這個紀錄檔佔滿，導致伺服器不可執行，超過設定時間後紀錄檔檔案會被刪除

三、錯誤紀錄檔

錯誤紀錄檔是 MySQL 中最重要的紀錄檔之一，它記錄了當 mysqld 啟動和停止，以及伺服器在執行過程中發生任何嚴重錯誤（cordump，error，exception…）時的相關資訊。當資料庫出現故障導致無法正常使用時，可以首先檢視此紀錄檔

mysqld 使用的錯誤紀錄檔名為 host_name.err(host_name 為主機名) ，並預設在引數data_dir(資料目錄)指定的目錄中寫入紀錄檔檔案

四、查詢紀錄檔

查詢紀錄檔記錄了client傳送的所有SQL語句

由於上線專案sql特別多，開啟查詢紀錄檔IO太多導致MySQL效率低，我們一般都不會開啟，只有在偵錯時才開啟，比如通過檢視sql發現熱點資料從而可以進行快取

show global variables like '%genera%';

五、二進位制紀錄檔

不是明文，不能直接檢視，需要通過mysqlbinlog工具（mysql原生自帶）解析binlog紀錄檔檔案

二進位制紀錄檔(BINLOG)記錄了所有的 DDL(資料定義語言)語句和 DML(資料操縱語言) 語句，但是不包括資料查詢語句（不記錄select操作，記錄的是資料庫的更改操作）

語句以“事件”的形式儲存，它描述了資料的更改過程。二進位制紀錄檔對於災難時的資料恢復起著極其重要的作用。

兩個重要的應用場景：主從複製、資料恢復

主從複製：主庫所有的更新操作（update、delete、insert、alter …）都記錄在binlog中，從庫讀主庫的binlog，把binlog的所有操作在從庫上在進行一遍

檢視當前的binlog：

show binary logs; -- show master logs;

binlog預設在MySQL的data_dir下

1. 演示binlog記錄更改

我們先重新整理一下，生成一個新的binlog

切換資料庫

更改一下資料

再次檢視binlog

我們發現紀錄檔的filesize和剛才的不一樣了，肯定記錄我們剛才的資料更改操作

如果我們直接cat紀錄檔檢視，會發現不是明文，無法直接檢視

我們需要通過mysqlbinlog進行檢視，如下：

mysqlbinlog --no-defaults --database=school --base64-output=decode-rows -v --start-datetime='2022-03-01 00:00:00' --stop-datetime='2022-03-31 00:00:00' mysql-bin.000001 | more