1.准備四台MySQL服務器以及一台MyCat服務器
我這里的MyCat服務器搭建在第一台MySQL服務器上,所以只有4台服務器
M1 192.168.159.128 主庫1 Mycat
S1 192.168.159.129 從庫1
M2 192.168.159.130 主庫2
S2 192.168.159.131 從庫2
注:如果MySQL是在VMWare中克隆出來的,那么要修改MySQL的auto.cnf文件,讓他們不一樣
然后上四台機器的MySQL配置文件
M1 讓server-id唯一即可 log-bin開啟二進制日志 log-slave-updates這個的作用主要是為了當M1的數據庫作為M2的從數據庫時,M2的數據發生更改時,作為從數據庫的M1也會發生相應改變
server-id=1 log-slave-updates log-bin=mysql-bin
S1
server-id=2
M2
server-id=3 log-slave-updates log-bin=mysql-bin
S2
server-id=4
2.開啟MySQL主從同步
首先開啟M1的MySQL,連上MySQL之后
然后M1要同步的數據庫為M2和S1,因為M1數據庫和M2互為主從,所以也要配置M2為M1的從數據庫
在M2和S1的數據庫上進行如下操作:
stop slave; change master to master_host='192.168.159.128',master_user='root',master_password='123456',master_log_file='mysql-bin.000009',master_log_pos=154; start slave;
注意這里的master_log_file和master_log_pos的值要跟前面M1得到的值保持一致
接下來是M2要同步的數據庫,分別是S2,M1
首先在M2上獲取信息
然后在S2和M1上面進行如下操作
stop slave; change master to master_host='192.168.159.130',master_user='root',master_password='123456',master_log_file='mysql-bin.000009',master_log_pos=7367; start slave;
最后查看各個服務器的狀態:
如果四台服務器上面的slave-io-running和slave-sql-running的值都為yes的話,那么基本上就ok了,這時候我們MySQL的主從同步已經實現了。
然后我們創建一個數據庫ouyang,在里面創建一個表employee
create database ouyang; create table employee(id int not null primary key,name varchar(100),sharding_id int not null);
3.MyCat實現讀寫分離
這里MyCat的安裝就不介紹了,我這里使用的是MyCat1.6版本
直接上配置文件了,分別是schema.xml,server.xml,rule.xml,以及一個我們要使用到的partition-hash-int.txt文件
schema文件:
<!-- schema標簽 name表示在mycat實例中的邏輯庫 簡單的說就是你在mycat中看到的數據庫名稱 checkSQLschema表示是否去除邏輯庫名,就是操作的時候帶不帶JameMyCatSchema. SqlMaxLimit為默認的分頁數-->
<schema name="JamesMycatSchema" checkSQLschema="false" sqlMaxLimit="100">
<!-- name屬性表示mycat中的表名 primarykey為主鍵 datanode是數據節點,來自dataNode標簽的name值綁定,rule是數據分片的規則 sharding-by-intfile為分片枚舉 --> <table name="employee" primaryKey="ID" dataNode="dn4" rule="sharding-by-intfile" /> </schema>
<!-- dataNode標簽 name就是分片的名字 datahost是指哪個數據庫實例 database定義該分片屬於哪個具體數據庫實例上的具體庫 --> <dataNode name="dn4" dataHost="localhost1" database="ouyang" />
<!-- datahost標簽 數據庫實例 name就是名稱 maxCon指定每個讀寫實例連接池的最大連接,標簽內嵌套的writeHost,readHost標簽都會使用這個屬性的值來實例化出連接池的最大連接數
指定每個讀寫實例連接池的最小連接,初始化連接池的大小
balance:負載均衡類型:
(1)balance="0", 不開啟讀寫分離機制,所有讀操作都發送到當前可用的writeHost 上。
(2)balance="1",全部的 readHost 與 stand by writeHost 參與 select 語句的負載均衡,簡單的說,當雙主雙從模式(M1->S1,M2->S2,並且 M1 與 M2 互為主備),正常情況下,M2,S1,S2 都參與 select 語句的
負載均衡。
(3)balance="2",所有讀操作都隨機的在 writeHost、 readhost 上分發。
(4)balance="3",所有讀請求隨機的分發到 wiriterHost 對應的 readhost 執行,writerHost 不負擔讀壓力,注意 balance=3 只在 1.4 及其以后版本有,1.3 沒有。
writeType 屬性
(1)writeType="0", 所有寫操作發送到配置的第一個 writeHost,第一個掛了切到還生存的第二個riteHost,重新啟動后已切換后的為准,切換記錄在配置文件中:dnindex.properties.
(2)writeType="1",所有寫操作都隨機的發送到配置的 writeHost,1.5 以后廢棄不推薦。
dbType指定后端連接的數據庫類型,目前支持二進制的 mysql 協議,還有其他使用 JDBC 連接的數據庫。例如:mongodb、 oracle、 spark 等。
dbDriver指定連接后端數據庫使用的 Driver,目前可選的值有 native 和 JDBC。使用native 的話,因為這個值執行的是二進制的 mysql 協議,所以可以使用 mysql 和 maridb。其他類型的數據庫則需要使用 JDBC 驅動來支持
switchType
-1 表示不自動切換
1 默認值,自動切換
2 基於 MySQL 主從同步的狀態決定是否切換心跳語句為 show slave status
3 基於 MySQL galary cluster 的切換機制(適合集群)(1.4.1)心跳語句為 show status like ‘wsrep%’.-->
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100"> <heartbeat>select user()</heartbeat> <!-- can have multi write hosts --> <!--host 用於標識不同實例,一般 writeHost 我們使用*M1,readHost 我們用*S1。--> <!--url 后端實例連接地址。Native:地址:端口 JDBC:jdbc的url--> <!--password 后端存儲實例需要的密碼--> <!--user 后端存儲實例需要的用戶名字--> <!--weight 權重 配置在 readhost 中作為讀節點的權重--> <!--usingDecrypt 是否對密碼加密,默認0。具體加密方法看官方文檔。--> <writeHost host="hostM1" url="192.168.159.128:3306" user="root" password="123456"> <readHost host="hostS1" url="192.168.159.129:3306" user="root" password="123456" /> </writeHost> <writeHost host="hostM2" url="192.168.159.130:3306" user="root" password="123456"> <readHost host="hostS2" url="192.168.159.131:3306" user="root" password="123456" /> </writeHost> </dataHost>
server.xml
<?xml version="1.0" encoding="UTF-8"?> <!-- - - Licensed under the Apache License, Version 2.0 (the "License"); - you may not use this file except in compliance with the License. - You may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 - - Unless required by applicable law or agreed to in writing, software - distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the License for the specific language governing permissions and - limitations under the License. --> <!DOCTYPE mycat:server SYSTEM "server.dtd"> <mycat:server xmlns:mycat="http://io.mycat/"> <system> <property name="useSqlStat">0</property> <!-- 1為開啟實時統計、0為關閉 --> <property name="useGlobleTableCheck">0</property> <!-- 1為開啟全加班一致性檢測、0為關閉 --> <property name="sequnceHandlerType">2</property> <!-- <property name="useCompression">1</property>--> <!--1為開啟mysql壓縮協議--> <!-- <property name="fakeMySQLVersion">5.6.20</property>--> <!--設置模擬的MySQL版本號--> <!-- <property name="processorBufferChunk">40960</property> --> <!-- <property name="processors">1</property> <property name="processorExecutor">32</property> --> <!--默認為type 0: DirectByteBufferPool | type 1 ByteBufferArena--> <property name="processorBufferPoolType">0</property> <!--默認是65535 64K 用於sql解析時最大文本長度 --> <!--<property name="maxStringLiteralLength">65535</property>--> <!--<property name="sequnceHandlerType">0</property>--> <!--<property name="backSocketNoDelay">1</property>--> <!--<property name="frontSocketNoDelay">1</property>--> <!--<property name="processorExecutor">16</property>--> <!--<property name="serverPort">8066</property> <property name="managerPort">9066</property> <property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property> <property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> --> <!--分布式事務開關,0為不過濾分布式事務,1為過濾分布式事務(如果分布式事務內只涉及全局表,則不過濾),2為不過濾分布式事務,但是記錄分布式事務日志--> <property name="handleDistributedTransactions">0</property> <!--off heap for merge/order/group/limit 1開啟0關閉--> <property name="useOffHeapForMerge">1</property> <!--單位為m--> <property name="memoryPageSize">1m</property> <!--單位為k--> <property name="spillsFileBufferSize">1k</property> <property name="useStreamOutput">0</property> <!--單位為m--> <property name="systemReserveMemorySize">384m</property> <!--是否采用zookeeper協調切換 --> <property name="useZKSwitch">true</property> </system> <!-- 全局SQL防火牆設置 --> <!-- <firewall> <whitehost> <host host="127.0.0.1" user="mycat"/> <host host="127.0.0.2" user="mycat"/> </whitehost> <blacklist check="false"> </blacklist> </firewall> --> <user name="root"> <property name="password">123456</property> <property name="schemas">JamesMycatSchema</property> <!-- 表級 DML 權限設置 --> <!-- <privileges check="false"> <schema name="TESTDB" dml="0110" > <table name="tb01" dml="0000"></table> <table name="tb02" dml="1111"></table> </schema> </privileges> --> </user> <user name="user"> <property name="password">user</property> <property name="schemas">JamesMycatSchema</property> <property name="readOnly">true</property> </user> </mycat:server>
rule.xml 主要看一眼這個配置就行,這個是schema文件中mycat employ表指定的分片規則 根據sharding_id進行分片 algorithm是分片函數 指定的是rule文件的function標簽
<tableRule name="sharding-by-intfile"> <rule> <columns>sharding_id</columns> <algorithm>hash-int</algorithm> </rule> </tableRule>
<function name=""hash-int" class="io.mycat.route.function.PartitionByFileMap">
<properties name="mapFile">partition-hash-int.txt</properties>
</function>
partition-hash-int.txt
10000=0
最后啟動測試即可。