阿里雲RDS與ECS自建mysql數據庫主從同步(GTID方式)


1、GTID的概念
全局事務標識:global transaction identifiers;
GTID是一個事務一一對應,並且全局唯一ID;
一個GTID在一個服務器上只執行一次,避免重復執行導致數據混亂或者主從不一致;
GTID用來代替傳統復制方法,不再使用MASTER_LOG_FILE+MASTER_LOG_POS開啟復制。而是使用MASTER_AUTO_POSTION=1的方式開始復制;
MySQL-5.6.5開始支持的,MySQL-5.6.10后開始完善;
在傳統的slave端,binlog是不用開啟的,但是在GTID中slave端的binlog是必須開啟的,目的是記錄執行過的GTID(強制)。

2、GTID的組成
GTID = source_id:transaction_id
source_id,用於鑒別原服務器,即mysql服務器唯一的的server_uuid,由於GTID會傳遞到slave,所以也可以理解為源ID。
transaction_id,為當前服務器上已提交事務的一個序列號,通常從1開始自增長的序列,一個數值對應一個事務。
示例:3D598FA47-71CA-11E1-9E88-C80AJ8Y29562:97
前面的一串為服務器的server_uuid,即3D598FA47-71CA-11E1-9E88-C80AJ8Y29562,后面的97為transaction_id

3、GTID的優勢
更簡單的實現failover,不用以前那樣在需要找log_file和log_pos;
更簡單的搭建主從復制;
比傳統的復制更加安全;
GTID是連續的沒有空洞的,保證數據的一致性,零丟失。

4、GTID的工作原理
當一個事務在主庫端執行並提交時,產生GTID,一同記錄到binlog日志中;
binlog傳輸到slave,並存儲到slave的relaylog后,讀取這個GTID的這個值設置gtid_next變量,即告訴Slave,下一個要執行的GTID值;
sql線程從relay log中獲取GTID,然后對比slave端的binlog是否有該GTID;
如果有記錄,說明該GTID的事務已經執行,slave會忽略;
如果沒有記錄,slave就會執行該GTID事務,並記錄該GTID到自身的binlog,在讀取執行事務前會先檢查其他session持有該GTID,確保不被重復執行;
在解析過程中會判斷是否有主鍵,如果沒有就用二級索引,如果沒有就用全部掃描。

 

配置RDS主庫

1、登錄 RDS 控制台,選擇目標實例。
2、配置RDS數據庫賬號、密碼 (ecstb/ecstb) 和授權數據庫rdsdb

配置ESC 從庫

修改ECS從庫 mysql 配置文件,在[mysqld]最后添加如下
#vi /etc/my.cnf

####RDS to mysql ####
server-id            			=1001                       #不可與RDS主庫id相同
port 						    = 3306                    
replicate-do-db			        =rdsdb                       #需要同步的數據庫

binlog_format                   = row                        #日志文件格式
log-bin                         = mysql-bin
log-bin-index                   = mysql-bin.index
relay-log                       = relay-log
relay_log_index                 = relay-log.index
slave-skip-errors               = all

gtid_mode                       = on                          #開啟gtid模式
enforce_gtid_consistency        = on
log-slave-updates               = 1
sql_mode                        = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

 保存后重啟mysql服務
service mysqld restart 

systemctl start mysqld.service

5、配置主從同步
連接RDS主庫,查詢GTID

 

進入ECS從庫,修改這個信息

mysql> stop slave;
mysql> set global gtid_purged = '533ac4e6-9565-11e8-abb5-7cd30abca02e:1-3099396';

注意:設置gtid_purged值時,gtid_executed值必須為空否則報錯,該值清空的方法就是reset  master命令

mysql>reset master; 

 

. 執行同步

CHANGE MASTER TO MASTER_HOST = 'rm-wz9523l****4ebzbso.mysql.rds.aliyuncs.com', MASTER_USER = 'md***s', MASTER_PASSWORD = 'tJD2****96', MASTER_PORT = 3306, MASTER_AUTO_POSITION = 1, MASTER_RETRY_COUNT = 0, MASTER_HEARTBEAT_PERIOD = 10000;

CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.001646', MASTER_LOG_POS=0; 
start slave;
show slave status\G

 

 操作完成




免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM