MySQL日志詳解(上篇)


更多日志內容請看下篇:Mysql 日志下篇

日志是數據庫的重要組成部分,主要用來記錄數據庫的運行情況、日常操作和錯誤信息


在 MySQL 中,日志可以分為二進制日志、錯誤日志、通用查詢日志和慢查詢日志。對於 MySQL 的管理工作而言,這些日志文件是不可缺少的。分析這些日志,可以幫助我們了解 MySQL 數據庫的運行情況、日常操作、錯誤信息和哪些地方需要進行優化。

下面簡單介紹 MySQL 中 4 種日志文件的作用。

  • 二進制日志:該日志文件會以二進制的形式記錄數據庫的各種操作,但不記錄查詢語句。
  • 錯誤日志:該日志文件會記錄 MySQL 服務器的啟動、關閉和運行錯誤等信息。
  • 通用查詢日志:該日志記錄 MySQL 服務器的啟動和關閉信息、客戶端的連接信息、更新、查詢數據記錄的 SQL 語句等。
  • 慢查詢日志:記錄執行事件超過指定時間的操作,通過工具分析慢查詢日志可以定位 MySQL 服務器性能瓶頸所在。


為了維護 MySQL 數據庫,經常需要在 MySQL 中進行日志操作,包含日志文件的啟動、查看、停止和刪除等,這些操作都是數據庫管理中最基本、最重要的操作。

例如,當用戶 root 登錄到 MySQL 服務器后,就會在日志文件里記錄該用戶的登錄事件、執行操作等信息。當 MySQL 服務器運行時出錯,出錯信息就會被記錄到日志文件里。

日志操作是數據庫維護中最重要的手段之一。如果 MySQL 數據庫系統意外停止服務,我們可以通過錯誤日志查看出現錯誤的原因。還可以通過二進制日志文件來查看用戶分別執行了哪些操作、對數據庫文件做了哪些修改。然后,還可以根據二進制日志中的記錄來修復數據庫。

在 MySQL 所支持的日志文件里,除了二進制日志文件外,其它日志文件都是文本文件。默認情況下,MySQL 只會啟動錯誤日志文件,而其它日志則需要手動啟動

使用日志有優點也有缺點。啟動日志后,雖然可以對 MySQL 服務器性能進行維護,但是會降低 MySQL 的執行速度。例如,一個查詢操作比較頻繁的 MySQL 中,記錄通用查詢日志和慢查詢日志要花費很多的時間。

日志文件還會占用大量的硬盤空間。對於用戶量非常大、操作非常頻繁的數據庫,日志文件需要的存儲空間甚至比數據庫文件需要的存儲空間還要大。因此,是否啟動日志,啟動什么類型的日志要根據具體的應用來決定。

1.MySQL錯誤日志(Error Log)詳解

錯誤日志(Error Log)是 MySQL 中最常用的一種日志,主要記錄 MySQL 服務器啟動和停止過程中的信息、服務器在運行過程中發生的故障和異常情況等。

下面介紹如何操作查看錯誤日志。

啟動和設置錯誤日志

在 MySQL 數據庫中,默認開啟錯誤日志功能。一般情況下,錯誤日志存儲在 MySQL 數據庫的數據文件夾下,通常名稱為 hostname.err。其中,hostname 表示 MySQL 服務器的主機名。

在 MySQL 配置文件中,錯誤日志所記錄的信息可以通過 log-error 和 log-warnings 來定義,其中,log-err 定義是否啟用錯誤日志功能和錯誤日志的存儲位置,log-warnings 定義是否將警告信息也記錄到錯誤日志中。

查看錯誤日志

錯誤日志中記錄着開啟和關閉 MySQL 服務的時間,以及服務運行過程中出現哪些異常等信息。如果 MySQL 服務出現異常,可以到錯誤日志中查找原因。

在 MySQL 中,通過 SHOW 命令可以查看錯誤日志文件所在的目錄及文件名信息。

將 log_error 選項加入到 MySQL 配置文件的 [mysqld] 組中,形式如下:

[mysqld]
log-error=dir/{filename}

其中,dir 參數指定錯誤日志的存儲路徑;filename 參數指定錯誤日志的文件名;省略參數時文件名默認為主機名,存放在 Data 目錄中。

重啟 MySQL 服務后,參數開始生效,可以在指定路徑下看到 filename.err 的文件,如果沒有指定 filename,那么錯誤日志將直接默認為 hostname.err。

注意:錯誤日志中記錄的並非全是錯誤信息,例如 MySQL 如何啟動 InnoDB 的表空間文件、如何初始化自己的存儲引擎等,這些也記錄在錯誤日志文件中。

錯誤日志以文本文件的形式存儲,直接使用普通文本工具就可以查看。這里通過記事本打開,從上面可以知道錯誤日志的文件名。該文件在默認的數據路徑“C:\ProgramData\MySQL\MySQL Server 5.7\Data\”下,打開 LAPTOP-UHQ6V8KP.err 文件,部分內容如下:

190906 22:06:45 InnoDB: Completed initialization of buffer pool
190906 22:06:45 InnoDB: highest supported file format is Barracuda.
190906 22:06:45  InnoDB: Waiting for the background threads to start
190906 22:06:46 InnoDB: 5.7.29 started; log sequence number 1605345
190906 22:06:47 [Note] Server hostname (bind-address): '0.0.0.0'; port: 3306
190906 22:06:47 [Note]   - '0.0.0.0' resolves to '0.0.0.0';
190906 22:06:47 [Note] Server socket created on IP: '0.0.0.0'.
190906 22:06:47 [Note] Event Scheduler: Loaded 0 events
190906 22:06:47 [Note] /usr/sbin/mysqld: ready for connections.
Version: '5.7.29-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  MySQL Community Server (GPL)
View Code

以上是錯誤日志文件的一部分,主要記載了系統的一些運行錯誤。

刪除錯誤日志

在 MySQL 中,可以使用 mysqladmin 命令來開啟新的錯誤日志,以保證 MySQL 服務器上的硬盤空間。mysqladmin 命令的語法如下:

mysqladmin -uroot -p flush-logs

執行該命令后,MySQL 服務器首先會自動創建一個新的錯誤日志,然后將舊的錯誤日志更名為 filename.err-old。

MySQL 服務器發生異常時,管理員可以在錯誤日志中找到發生異常的時間、原因,然后根據這些信息來解決異常。對於很久之前的錯誤日志,查看的可能性不大,可以直接將這些錯誤日志刪除。

2.MySQL二進制日志(Binary Log)詳解

二進制日志(Binary Log)也可叫作變更日志(Update Log),是 MySQL 中非常重要的日志。主要用於記錄數據庫的變化情況,即 SQL 語句的 DDL 和 DML 語句,不包含數據記錄查詢操作。

如果 MySQL 數據庫意外停止,可以通過二進制日志文件來查看用戶執行了哪些操作,對數據庫服務器文件做了哪些修改,然后根據二進制日志文件中的記錄來恢復數據庫服務器。

默認情況下,二進制日志功能是關閉的。可以通過以下命令查看二進制日志是否開啟,命令如下:

mysql> SHOW VARIABLES LIKE 'log_bin';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_bin       | OFF   |
+---------------+-------+
1 row in set, 1 warning (0.02 sec)

從結果可以看出,二進制日志是關閉的。

啟動和設置二進制日志

在 MySQL 中,可以通過在配置文件中添加 log-bin 選項來開啟二進制日志,格式如下:

[mysqld]
log-bin=dir/[filename]

其中,dir 參數指定二進制文件的存儲路徑;filename 參數指定二進制文件的文件名,其形式為 filename.number,number 的形式為 000001、000002 等。

每次重啟 MySQL 服務后,都會生成一個新的二進制日志文件,這些日志文件的文件名中 filename 部分不會改變,number 會不斷遞增。

如果沒有 dir 和 filename 參數,二進制日志將默認存儲在數據庫的數據目錄下,默認的文件名為 hostname-bin.number,其中 hostname 表示主機名。

下面在 my.ini 文件的 [mysqld] 組中添加以下語句:

log-bin

重啟 MySQL 服務器后,可以在 MySQL 數據庫的數據目錄下看到 LAPTOP-UHQ6V8KP-bin.000001 這個文件,同時還生成了 LAPTOP-UHQ6V8KP-bin.index 文件。此處,MySQL 服務器的主機名為 LAPTOP-UHQ6V8KP。

還可以在 my.ini 文件的 [mysqld] 組中進行如下修改。語句如下:

log-bin=C:log\mylog

重啟 MySQL 服務后,可以在 C:log 文件夾下看到 mylog.000001 文件和 mylog.index 文件。

查看二進制日志

1. 查看二進制日志文件列表

可以使用如下命令查看 MySQL 中有哪些二進制日志文件:

mysql> SHOW binary logs;
+----------------------------+-----------+
| Log_name                   | File_size |
+----------------------------+-----------+
| LAPTOP-UHQ6V8KP-bin.000001 |       177 |
| LAPTOP-UHQ6V8KP-bin.000002 |       154 |
+----------------------------+-----------+
2 rows in set (0.00 sec)

2. 查看當前正在寫入的二進制日志文件

可以使用以下命令查看當前 MySQL 中正在寫入的二進制日志文件。

mysql> SHOW master status;
+----------------------------+----------+--------------+------------------+-------------------+
| File                       | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+----------------------------+----------+--------------+------------------+-------------------+
| LAPTOP-UHQ6V8KP-bin.000002 |      154 |              |                  |                   |
+----------------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

3. 查看二進制日志文件內容

二進制日志使用二進制格式存儲,不能直接打開查看。如果需要查看二進制日志,必須使用 mysqlbinlog 命令

mysqlbinlog 命令的語法形式如下:

mysqlbinlog filename.number

mysqlbinlog 命令只在當前文件夾下查找指定的二進制日志,因此需要在二進制日志所在的目錄下運行該命令,否則將會找不到指定的二進制日志文件。

例 1

下面使用 mysqlbinlog 命令,來查看 C:\log 目錄下的 mylog.000001 文件,代碼執行如下:

C:\Users\11645>cd C:\log
C:\log>mysqlbinlog mylog.000001
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 4
#200527  9:33:37 server id 1  end_log_pos 123 CRC32 0x69738cfd  Start: binlog v 4, server v 5.7.29-log created 200527  9:33:37 at startup
......
View Code

由於日志內容較長,這里只展示了 mylog 中的部分內容。

使用 mysqlbinlog 命令時,可以指定二進制文件的存儲路徑。這樣可以確保 mysqlbinlog 命令可以找到二進制文件。上面例子中的命令可以變為如下形式:

mysqlbinlog C:\log\mylog.000001

這樣,mysqlbinlog 命令就會到 C:\log 目錄下去查找 mylog.000001 文件。如果不指定路徑,mysqlbinlog 命令將在當前目錄下查找 mylog.000001 文件。

除了 filename.number 文件,MySQL 還會生成一個名為 filename.index 的文件,這個文件存儲着所有二進制日志文件的列表,可以用記事本打開該文件。

小技巧:實際工作中,二進制日志文件與數據庫的數據文件不放在同一塊硬盤上,這樣即使數據文件所在的硬盤被破壞,也可以使用另一塊硬盤上的二進制日志來恢復數據庫文件。
兩塊硬盤同時壞了的可能性要小得多,這樣可以保證數據庫中數據的安全。

刪除二進制日志

二進制日志中記錄着大量的信息,如果很長時間不清理二進制日志,將會浪費很多的磁盤空間。刪除二進制日志的方法很多,下面介紹幾種刪除二進制日志的方法。

1. 刪除所有二進制日志

使用 RESET MASTER 語句可以刪除的所有二進制日志,該語句的形式如下:

RESET MASTER;

登錄 MySQL 數據庫后,可以執行該語句來刪除所有二進制日志。刪除所有二進制日志后,MySQL 將會重新創建新的二進制日志,新二進制日志的編號從 000001 開始。

2. 根據編號刪除二進制日志

每個二進制日志文件后面有一個 6 位數的編號,如 000001。使用 PURGE MASTER LOGS TO 語句,可以刪除指定二進制日志的編號之前的日志。該語句的基本語法形式如下:

PURGE MASTER LOGS TO 'filename.number';

該語句將刪除編號小於 filename.number 的所有二進制日志。

例 2

下面刪除 mylog.000004 之前的二進制日志,代碼如下:

PURGE MASTER LOGS TO 'mylog.000004';

代碼執行完后,編號為 000001、000002 和 000003 的二進制日志將被刪除。

3. 根據創建時間刪除二進制日志

使用 PURGE MASTER LOGS TO 語句,可以刪除指定時間之前創建的二進制日志,該語句的基本語法格式如下:

PURGE MASTER LOGS TO 'yyyy-mm-dd hh:MM:ss';

其中,“hh”為 24 制的小時。該語句將刪除在指定時間之前創建的所有二進制日志。

例 3

下面刪除 2019-12-20 15:00:00 之前創建的二進制日志,代碼如下:

PURGE MASTER LOGS TO '2019-12-20 15:00:00";

代碼執行完后,2019-12-20 15:00:00 之前創建的所有二進制日志將被刪除。

暫時停止二進制日志

在配置文件中設置了 log_bin 選項之后,MySQL 服務器將會一直開啟二進制日志功能。刪除該選項后就可以停止二進制日志功能,如果需要再次啟動這個功能,需要重新添加 log_bin 選項。由於這樣比較麻煩,所以 MySQL 提供了暫時停止二進制日志功能的語句。

如果用戶不希望自己執行的某些 SQL 語句記錄在二進制日志中,可以在執行這些 SQL 語句之前暫停二進制日志功能。

使用 SET 語句來暫停/開啟二進制日志功能,命令如下:

SET SQL_LOG_BIN=0/1;

以上命令中,0 表示暫停二進制日志功能,1 表示開啟二進制功能。

拓展

my.ini 中的 [mysqld] 組下面有幾個設置參數是關於二進制日志的:

expire_logs_days = 10
max_binlog_size = 1​00M
  • expire_logs_day 定義了 MySQL 清除過期日志的時間、二進制日志自動刪除的天數。默認值為 0,表示“沒有自動刪除”。當 MySQL 啟動或刷新二進制日志時可能刪除。
  • max_binlog_size 定義了單個文件的大小限制,如果二進制日志寫入的內容大小超出給定值,日志就會發生滾動(關閉當前文件,重新打開一個新的日志文件)。不能將該變量設置為大於 1GB 或小於 4096B(字節),其默認值是 1GB。

MySQL使用二進制日志還原數據庫

二進制日志中記錄了用戶對數據庫更改的所有操作,如 INSERT 語句、UPDATE 語句、CREATE 語句等。如果數據庫因為操作不當或其它原因丟失了數據,可以通過二進制日志來查看在一定時間段內用戶的操作,結合數據庫備份來還原數據庫。

下面將為讀者詳細介紹使用二進制日志還原數據庫的方法。

數據庫遭到意外損壞時,應該先使用最近的備份文件來還原數據庫。另外備份之后,數據庫可能進行了一些更新,這時可以使用二進制日志來還原。因為二進制日志中存儲了更新數據庫的語句,如 UPDATE 語句、INSERT 語句等。

二進制日志還原數據庫的命令如下:

mysqlbinlog filename.number | mysql -u root -p

以上命令可以理解成,先使用 mysqlbinlog 命令來讀取 filename.number 中的內容,再使用 mysql 命令將這些內容還原到數據庫中。

技巧:二進制日志雖然可以用來還原 MySQL 數據庫,但是其占用的磁盤空間也是非常大的。因此,在備份 MySQL 數據庫之后,應該刪除備份之前的二進制日志。如果備份之后發生異常,造成數據庫的數據損失,可以通過備份之后的二進制日志進行還原。

使用 mysqlbinlog 命令進行還原操作時,必須是編號(number)小的先還原。例如,mylog.000001 必須在 mylog.000002 之前還原。

例 1

下面使用二進制日志來還原數據庫,代碼如下:

mysqlbinlog mylog.000001 | mysql -u root -p
mysqlbinlog mylog.000002 | mysql -u root -p
mysqlbinlog mylog.000003 | mysql -u root -p
mysqlbinlog mylog.000004 | mysql -u root -p


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM