MySQL常用工具、日志及讀寫分離


1.MySQL中常用工具

1.1 mysql

該mysql不是值mysql服務,而是指mysql的客戶端工具。
語法 :
mysql [options] [database]

1.1.1連接選項

在這里插入圖片描述

1.1.2 執行選項

-e, --execute=name : 執行sql語句並退出
在這里插入圖片描述

1.2 mysqladmin

mysqladmin是一個執行管理操作的客戶端程序。可以用它來檢查服務器的配置和當前狀態、創建並刪除數據庫等。
可以通過 :mysqladmin --help 指令查看幫助文檔。
在這里插入圖片描述

1.3 mysqlbinlog

由於服務器生成的二進制日志文件以二進制格式保存,所以如果想要檢查這些文本的文本格式,就會使用到mysqlbinlog日志管理工具。
語法 :
在這里插入圖片描述

1.4 mysqldump

mysqldump客戶端工具用來備份數據庫或在不同數據庫之間進行數據遷移。備份內容包含創建表,及插入表的sql語句。
語法 :
在這里插入圖片描述

1.4.1 連接選項

在這里插入圖片描述

1.4.2 輸出內容選項

在這里插入圖片描述
示例 :
mysqldump -uroot -p2143 db01 tb_book --add-drop-database --add-drop-table > a.sql
mysqldump -uroot -p2143 -T /tmp test city
在這里插入圖片描述
在這里插入圖片描述
在這里插入圖片描述

1.5 mysqlimport/source

mysqlimport是客戶端數據導入工具,用來導入mysqldump 加 -T 參數后導出的文本文件。
語法 :
mysqlimport [options] db_name textfilel [textfile2…]
示例 :
mysqlimport -urrot -p2143 test /tmp/city.txt
如果需要導入sql文件,可以使用mysql中的source指令:
source /root/tb_book.sql

1.6 mysqlshow

mysqlshow客戶端對查找工具,用來很快的查找存在那些數據庫、數據庫中的表、表中的列或者索引。
語法 :
mysqlshow [options] [db_name [table_name] [col_name]]]
參數 :
–count :顯示數據庫及表的統計信息(數據庫,表均可以不指定)
-i :顯示指定數據庫或者指定表的狀態信息
示例 :
在這里插入圖片描述

2. MySQL日志

在任何一種數據庫中,都會有各種各樣的日志,記錄着數據庫工作的方方面面,以幫助數據庫管理員追蹤數據庫曾經發生過的各種事件。MySQL也不例外,在MySQL中,有四種不同的日志,分別是錯誤日志、二進制日志(BINLOG日志)、查詢日志和慢查詢日志,這些日志記錄着數據庫在不同方面的蹤跡。

2.1 錯誤日志

錯誤日志是MySQL中最重要的日志之一,它記錄了當MySQL的啟動和停止時,以及服務器在運行過程中發生任何嚴重錯誤時的相關信息。當數據庫出現任何故障導致無法正常使用時,可以首先查看此日志。
該日志是默認開啟的,默認存放目錄為mysql的數據目錄(var/lib/mysql),默認的日志文件為hostname.err(hostname是主機名)。
查看日志位置指令 :
show variables like ‘log_error%’;
在這里插入圖片描述
查看日志內容 :
tail -f /var/lib/mysql/xaxh-server.err
在這里插入圖片描述

2.2 二進制日志

2.2.1 概述

二進制日志(BINLOG)記錄了所有的DDL(數據定義語言)語句和DML(數據操作語言)語句,但是不包括數據查詢語句。此日志對於災難時的數據恢復起着極其重要的作用,MySQL的主從復制,就是通過該binlog實現的。
二進制日志,默認情況下是沒有開啟的,需要MySQL的陪着文件中開啟,並配置MySQL日志的格式。
配置文件位置 :/usr/my.cnf
日志存放位置 :配置時,給定了文件名但是沒有指定路徑,日志默認寫入MySQL的數據目錄。
配置開始binlog日志,日志的文件前綴為mysqlbin ------》 生成的文件名如 :
mysqlbin.000001,mysqlbin.000002
log_bin=mysqlbin
配置二進制日志的格式
binlog_format=STATEMENT

2.2.2 日志格式

STATEMENT
該日志格式在日志文件中記錄的都是SQL語句(statmeent),每一條對數據進行修改的SQL都會記錄在日志文件中,通過MySQL提供的MySQLbinlog工具,可以清晰的查看到每條語句的文本。主從復制的時候,從庫(slave)會將日志解析為原文本,並在從庫重新執行一次。
ROW
該日志格式在日志文件中記錄的是每一行的數據變更,而不是記錄SQL語句。比如,執行SQL語句 :update tb_book set status = ‘1’,如果是STATEMENT日志格式,在日志中會記錄一行SQL文件;如果是ROW,由於是對全表進行更新,也就是每一行記錄都會發生變更,ROW格式的日志中會記錄每一行的數據變更。
MIXED
這是目前MySQL默認的日志格式,即混合了STATEMENT和ROW兩種格式。默認情況下采用STATEMENT,但是在一些特殊情況下采用ROW來進行記錄。MIXED格式能盡量利用兩種模式的優點,而避開他們的缺點。

2.2.3 日志讀取

由於日志以二進制方式存儲,不能直接讀取,需要用mysqlbinlog工具來查看,語法如下 :
mysqlbinlog log-file;
查看STATEMENT格式日志 :
查看日志文件 :默認在/var/lib/mysql目錄下
在這里插入圖片描述
mysqlbin.index : 該文件是日志索引文件,記錄日志的文件名;
mysqlbing.000001 : 日志文件
查看日志內容 :
mysqlbinlog mysqlbing.000001;
在這里插入圖片描述
查看ROW格式日志
配置 :
配置開啟binlog日志,日志的文件前綴為mysqlbin —》生成的文件名如:mysqlbin.000001,mysqlbin.000002
log_bin=mysqlbin
配置二進制日志的格式
binlog_format=ROW
如果日志格式是ROW,直接查看數據,是查看不懂的;可以在mysqlbinlog后面加上參數 -w
mysqbinlog -vv mysqlbin.000002
在這里插入圖片描述

2.2.4 日志刪除

對於比較繁忙的系統,由於每天生成日志量大,這些日志如果長時間不清除,將會占用大量的磁盤空間。下面我們將會講解幾種刪除日志的常見方法:
方式1:
通過Reset Master指令刪除全部binlog日志,刪除之后,日志編號,將從xxxx.000001重新開始。
查詢之前,先查詢下日志文件 :
在這里插入圖片描述
執行刪除日志命令 :
Reset Master
執行之后,查看日志文件 :
在這里插入圖片描述
方式2:
執行指令 purge master logs to 'mysqlbin.’ ,該命令將刪除編號之前的所有日志。
方式3:
執行指令 purge master logs before ‘yyyy-mm-dd hh24:mi:ss’,該命令將刪除日志為“yyyy-mm-dd hh24:mi:ss”之前產生的所有日志。
方式4:
設置參數 --expire_logs_days=#,此參數的含義是設置日志的過期天數,過了指定的天數后日志將會被自動刪除,這樣將有利於減少DBA管理日志的工作量。
配置如下 :
在這里插入圖片描述

2.3 查詢日志

查詢日志中記錄了客戶端的所有操作語句,而二進制日志不包含查詢數據的SQL語句。
默認情況下,查看日志是未開啟的。如果需要開啟查詢日志,可以設置以下配置 :
該選項用來開啟查詢日志 ,可選值 :0或者 1;0代表關閉,1代表開啟
general_log=1
設置日志的文件名,如果沒有指定,默認的文件名為host_name.log
general_log_file=file_name
在mysql的配置文件/usr/my.cnf中配置如下內容:
在這里插入圖片描述
執行完查詢語句以后,再次查看查詢日志 :
在這里插入圖片描述

2.4 慢查詢日志

慢查詢日志記錄了所有執行時間超過參數long_query_time 設置值並且掃描記錄數不小於min_examined_row_limit的所有的SQL語句的日志。
long_query_time默認為10秒,最小為0,精度可以到微妙。

2.4.1 文件位置和格式

慢查詢日志默認是關閉的。可以通過兩個參數來控制慢查詢日志:
該參數用來控制慢查詢日志是否開啟,可取值 :1和0,1代表開啟,0代表關閉
slow_query_log=1
該參數用來指定慢查詢日志的文件名
slow_query_log_file=slow_query.log
該選項用來配置查詢的時間限制,超過這個時間將認為值慢查詢,將需要進行日志記錄,默認10s
long_query_time=10

2.4.2 日志的讀取

和錯誤日志、查詢日志一樣,慢查看日志記錄的格式也是純文本,可以被直接讀取。
1)查詢long_query_time的值。
在這里插入圖片描述
2)查看慢查詢日志文件
直接通過cat指令查詢該日志文件 :
在這里插入圖片描述
如果慢查詢日志內容很多,直接查看文件,比較麻煩,這個時候可以借助於mysql自帶的mysqldumpslow工具,來對慢查詢日志進行分類匯總。
在這里插入圖片描述

3. MySQL復制

3.1 復制概述

復制是指將主數據庫的DDL和DML操作通過二進制日志傳到從庫服務器中,然后在從庫上對這些日志重新執行(也叫重做),從而使得從庫和主庫的數據保持同步。

3.2 復制原理

MySQL的主從復制原理如下。
在這里插入圖片描述
從上層來看,復制分成三步 :

  1. Master主庫在事務提交時,會把數據變更作為時間Events記錄在二進制日志文件Binlog中。
  2. 主庫推送二進制日志文件Binlog中的日志事件到從庫的中級日志Relay Log。
  3. Slave重做中繼日志中的事件,將改變反映它自己的數據。

3.3 復制優勢

MySQL復制的優勢主要包含以下三個方面 :

  1. 主庫出現問題,可以快速切換到從庫提供服務。
  2. 可以在從庫上執行查詢操作,從主庫中更新,實現讀寫分離,降低主庫的訪問壓力。
  3. 可以在從庫中執行備份,以避
  4. 免備份期間影響主庫的服務。

3.4 搭建步驟

3.4.1 master

1)在master的配置文件(/usr/my.cnf)中,配置如下內容 :
#mysql 服務ID,保證整個集群環境中唯一
server-id=1

#mysql binlog 日志的存儲路徑和文件名
log-bin=/var/lib/mysql/mysqlbin

#錯誤日志,默認以及開啟
#log-err
#mysql的安裝目錄
#basedir
#mysql的臨時目錄
#tmpdir
#mysql的數據存放目錄
#datadir
#是否只讀,1代表只讀,0代表讀寫
read-only=0
#忽略的數據,指不需要同步的數據庫
binlog-ignore-db=mysql

#指定同步的數據庫
#binlog-do-db=db01
2)執行完畢之后,需要重啟MySQL :
service mysql restart;
3)創建同步數據的賬戶,並且進行授權操作:
grant replication slave on . to ‘demo’@‘192.168.192.131’ identified by ‘demo’;
flush privileges;
4)查看master狀態 :
在這里插入圖片描述
在這里插入圖片描述

3.4.2 slave

1)在slave端配置文件中,配置如下內容 :
#mysql服務端ID,唯一
server-id=2
#指定binlog日志
log-bin=/var/lib/mysql/mysqlbin
2)執行完畢之后,需要重啟MySQL:
service mysql restart;
3)執行如下指令:
change master to master_host=‘192.168.192.130’,master_user=‘demo’,master_password=‘demo’,
master_log_file=‘mysqlbin.000001’,master_log_pos=413;
指定當前從庫的主庫的IP地址,用戶名,密碼,從那個日志文件開始的那個位置開始同步推送日志。
4)開啟同步操作
start slave;
show slave status;
在這里插入圖片描述
5)停止同步操作
stop slave;

4. 通過AOP記錄操作日志

4.1 自定義注解

通過自定義注解,來標識方法需不需要進行記錄日志,如果該方法在訪問時需要記錄日志,則在該方法上標識該注解即可。
@Inherited
@Document
@Target(Elementype.METHOD)
@Retention(RetentionPolicy.RUNTIME)
public @interface OperateLog{
}
@Component
@Aspect
public class OperateAdvice {
private static Logger log = Logger.getLogger(OperateAdvice.class);

@Around("execution(* cn.demo.controller.*.*(..)) && @annotation(operateLog)")
public Object insertLogAround(ProceedingJoinPoint pjp,OperateLog operateLog) throws Throwable {
		@Around("execution(* com.example.demo.controller.*.*(..)) && @annotation(operateLog)")
		public Object logAround(ProceedingJoinPoint pjo,OperateLog operateLog) {
			DateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
			// 訪問方法的時間
			String dateTime = sdf.format(new Date());
			// 訪問的方法
			String methodName = pjp.getSignature().getName();
			// 訪問哪一個類
			String className = pjp.getClass().getName();
			// 方法入參
			String paramAndValue = Arrays.toString(pjp.getArgs());
			// 統計耗時
			long startTime = System.currentTimeMillis();
			// 打印方法入參日志
			log.info("輸出日志");
			// 放行,並獲取返回值
			Object returnValue= new Object();
			try {
				returnValue= pjp.proceed();
			} catch (Throwable throwable) {
				log.error("");
			}
			long endTime = System.currentTimeMillis();
			// 打印請求耗時日志
			log.info();
			// 打印返回值日志
			return returnValue;
	}
}

}

4.2 性能優化 -分頁

4.8.1 優化count

創建一張表用來記錄日志表的總數據量 :
create table log_counter (
logcount bigint not null
)engine = innodb default CHARSET = utf8;
在每次插入數據之后,更新該表 :

update log_counter set logcount = logcount + 1

在進行分頁查詢時,獲取總記錄數,從該表中查詢即可。

select logcount from log_counter limit 1


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM