一、mysql主從復制介紹
mysql的主從復制並不是數據庫磁盤上的文件直接拷貝,而是通過邏輯的binlog日志復制到要同步的服務器本地,
然后由本地的線程讀取日志里面的sql語句,重新應用到mysql數據庫中。
mysql數據庫支持單向,雙向,鏈式級聯,環狀等不同業務場景的復制,一台服務器充當主服務器master,接收來自用戶的更新,
而一個或多個其他服務器充當從服務器slave,接收來自主服務器binlog文件的日志內容,解析出sql,更新到從服務器。
一主一從 (A -> B, A為主,B為從) 一主多從 (A -> B, A -> C, A為主,B與C為從) 雙主雙向同步 (A -> B , B -> A , A與B同為主,互相備份) 線性級聯 (A -> B -> C , A與B主主互備,C為從) 環狀級聯 (A -> B -> C -> A, A、B、C都為主,各節點都可寫入數據)
二、實現mysql主從讀寫分離的方案
1、通過程序實現讀寫分離(判斷語句關鍵字,去連接主從數據庫) 2、通過開源的軟件實現讀寫分離(mysql-proxy,amoeba,穩定性和功能一般,不建議生產使用) 3、獨立開發DAL層軟件
三、mysql主從復制原理介紹
mysql主從復制是一個異步的復制過程,將一個主庫復制到一個從庫,master與slave之間實現整個過程是由三個線程參與完成。
其中sql線程與I/O線程在slave端,另一個I/O線程在master端。
復制原理過程
1、在slave上執行start slave命令,開啟主從復制開關,開始進行主從復制。 2、slave的I/O線程通過master上已經授權的復制用戶請求master,請求指定binlog日志的指定位置。 3、master接收slave的I/O線程的請求后,其自身負責復制的I/O線程會根據slave的請求信息分批讀取指定binlog日志的指定位置之后的日志信息, 然后返回給slave的I/O線程,返回信息除了binlog日志外,還有master的新binlog文件名稱,以及新binlog中的下一個指定更新位置。 4、slave獲取來自master上I/O線程發送的binlog日志內容,日志文件及位置點后,會將binlog內容依次寫到slave自身的relay log(中繼日志)文件尾部, 並將新的binlog文件名和位置記錄到master-info文件中,以便下次從master讀取新binlog日志時,能告訴master從新binlog的新位置讀取。 5、slave的sql線程會實時檢測本地relay log中I/O線程新增加的日志內容,及時把relay log文件中的內容解析成sql語句,並按解析sql語句的位置順序執行這些sql語句。 relay-log.info中記錄當前應用中繼日志的文件名及位置點。
四、mysql主從復制操作
我這里是mysql單機多實例,3306、3308、3309
主庫為3306,從庫為3308,3309
(1)、在master主庫上
1、設置server-id值並開啟binlog功能
> vi /etc/my.cnf
[mysqld]
#用於同步的每台機器server-id都不能相同
server-id = 10 log-bin = /data/mysql56/data/mysql-bin
2、重啟主庫
> service mysqld restart
3、登陸主庫,查看server-id
> mysql -uroot -p > show variables like 'server_id';
4、主庫上建立用於從庫復制的賬號
> grant replication slave on *.* to "rep"@"%" identified by "123456"; > flush privileges; > select user,host from mysql.user; > show grants for rep@"%";
5、對主庫數據庫鎖表只讀(當前窗口不要關掉)
> flush table with read lock;
查看主庫狀態
> show master status;
6、備份主庫所有數據文件
> mysqldump -uroot -p -A -B | gzip > /data/mysql_bak.$(date +%F).sql.gz
7、備份完主庫數據后,解鎖
> unlock tables;
8、把主庫導出的數據遷移到從庫
(2)、在slave從庫上
1、設置server-id值並關閉binlog功能
有兩種情況下需打開binlog
級聯同步A->B->C中間的B,就要開啟binlog
在從庫做數據庫備份,必須要有全備和binlog日志才是完整備份。
> vi /mysql-instance/3308/my.cnf
[mysqld] server-id = 11 relay-log = /mysql-instance/3308/relay-bin relay-log-info-file = /mysql-instance/3308/relay-log.info
2、重啟從庫
> /mysql-instance/3308/mysql restart
3、登陸從庫檢查參數
> mysql -uroot -p -S /mysql-instance/3308/mysql.sock > show variables like 'log_bin'; > show variables like 'server_id';
4、把主庫mysqldump導出的數據恢復到從庫
> gzip -d /data/mysql_bak.2017-01-15.sql.gz
把主庫數據還原到從庫
> mysql -uroot -p -S /mysql-instance/3308/mysql.sock < /data/mysql_bak.2017-01-15.sql
5、登錄從庫,配置復制參數
CHANGE MASTER TO MASTER_HOST='127.0.0.1', MASTER_PORT=3306, MASTER_USER='rep', MASTER_PASSWORD='123456', MASTER_LOG_FILE='mysql-bin.000001', MASTER_LOG_POS=396;
注意上面的MASTER_LOG_FILE和MASTER_LOG_POS是在主庫中用show master status;查看的信息。
查看master.info文件
> cat /mysql-instance/3308/data/master.info
6、啟動從庫同步開關,測試主從復制情況
> mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "start slave;" > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "show slave status\G;" > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "show slave status\G" | egrep "IO_Running|SQL_Running|_Behind_Master"
7、測試主從復制
> mysql -uroot -p -e "create database wohehe;" > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "show databases;"
五、mysql主從復制線程狀態說明及用途
1、主庫線程的同步狀態
> show processlist\G;
*************************** 1. row *************************** Id: 5 User: rep Host: localhost:47605 db: NULL Command: Binlog Dump Time: 4728 State: Master has sent all binlog to slave; waiting for binlog to be updated Info: NULL
說明主庫線程已從binlog讀取更新,發送到了從庫,線程處理空閑狀態,等待binlog的事件更新。
2、從庫線程的同頻狀態
> show processlist\G;
*************************** 2. row *************************** Id: 6 User: system user Host: db: NULL Command: Connect Time: 5305 State: Slave has read all relay log; waiting for the slave I/O thread to update it Info: NULL
說明從庫已讀取所有中繼日志,等待從庫I/O線程的更新。
六、主從復制故障
如果我在從庫上創建了一個庫,然后去主庫創建同名的庫,那么這就會沖突了。
> show slave status;
Slave_IO_Running: Yes Slave_SQL_Running: No Seconds_Behind_Master: NULL Last_Error: Error 'Can't create database 'xxxxx'; database exists' on query. Default database: 'xxxxx'. Query: 'create database xxxxx'
對於該沖突解決方法
方法一
> stop slave; #將同步指針移動下一個,如果多次不同步,可重復操作 > set global sql_slave_skip_counter = 1; > start slave;
方法二
> vi /mysql-instance/3308/my.cnf
#把可以忽略的錯誤號事先在配置文件中配置 slave-skip-errors = 1002,1007,1032