ShardingSphere實現分表+ 讀寫分離
有關分庫分表前面寫了五篇博客:
2、分庫分表(2) --- ShardingSphere(理論)
3、分庫分表(3) ---SpringBoot + ShardingSphere實現讀寫分離
4、分庫分表(4) ---SpringBoot + ShardingSphere 實現分表
5、分庫分表(5) ---SpringBoot + ShardingSphere 實現分庫分表
這篇博客通過ShardingSphere實現分表不分庫+讀寫分離
,並在文章最下方附上項目Github地址
。
一、項目概述
1、技術架構
項目總體技術選型
SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4 + MySQL + lombok(插件)
2、項目說明
場景
在實際開發中,如果表的數據過大,我們可能需要把一張表拆分成多張表,這里就是通過ShardingSphere實現分表+讀寫分離功能,但不分庫。
3、數據庫設計
分表
tab_user單表拆分為tab_user0表 和 tab_user1表。
讀寫分離
數據寫入master庫 ,數據讀取 slave庫 。
如圖
master庫
slave庫
說明
初始數據的時候,這邊只有 slave從庫的tab_user0 我插入了一條數據。那是因為我們這個項目中Mysql服務器並沒有實現主從部署,這兩個庫都在同一服務器上,所以
做不到主數據庫數據自動同步到從數據庫。所以這里在從數據庫建一條數據。等下驗證的時候,我們只需驗證數據是否存入master庫
,數據讀取是否在slave庫
。
具體的創建表SQL也會放到GitHub項目里
二、核心代碼
說明
完整的代碼會放到GitHub上,這里只放一些核心代碼。
1、application.properties
server.port=8084
#指定mybatis信息
mybatis.config-location=classpath:mybatis-config.xml
#數據庫
spring.shardingsphere.datasource.names=master0,slave0
spring.shardingsphere.datasource.master0.type=com.alibaba.druid.pool.DruidDataSource
spring.shardingsphere.datasource.master0.driver-class-name=com.mysql.jdbc.Driver
spring.shardingsphere.datasource.master0.url=jdbc:mysql://localhost:3306/master?characterEncoding=utf-8
spring.shardingsphere.datasource.master0.username=root
spring.shardingsphere.datasource.master0.password=123456
spring.shardingsphere.datasource.slave0.type=com.alibaba.druid.pool.DruidDataSource
spring.shardingsphere.datasource.slave0.driver-class-name=com.mysql.jdbc.Driver
spring.shardingsphere.datasource.slave0.url=jdbc:mysql://localhost:3306/slave?characterEncoding=utf-8
spring.shardingsphere.datasource.slave0.username=root
spring.shardingsphere.datasource.slave0.password=root
#數據分表規則
#指定所需分的表
spring.shardingsphere.sharding.tables.tab_user.actual-data-nodes=master0.tab_user$->{0..1}
#指定主鍵
spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.sharding-column=id
#分表規則為主鍵除以2取模
spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.algorithm-expression=tab_user$->{id % 2}
# 讀寫分離
spring.shardingsphere.masterslave.load-balance-algorithm-type=round_robin
spring.shardingsphere.masterslave.name=ms
#這里配置讀寫分離的時候一定要記得添加主庫的數據源名稱 這里為master0
spring.shardingsphere.sharding.master-slave-rules.master0.master-data-source-name=master0
spring.shardingsphere.sharding.master-slave-rules.master0.slave-data-source-names=slave0
#打印sql
spring.shardingsphere.props.sql.show=true
Sharding-JDBC可以通過Java
,YAML
,Spring命名空間
和Spring Boot Starter
四種方式配置,開發者可根據場景選擇適合的配置方式。具體可以看官網。
2、UserController
@RestController
public class UserController {
@Autowired
private UserService userService;
/**
* 模擬插入數據
*/
List<User> userList = Lists.newArrayList();
/**
* 初始化插入數據
*/
@PostConstruct
private void getData() {
userList.add(new User(1L,"小小", "女", 3));
userList.add(new User(2L,"爸爸", "男", 30));
userList.add(new User(3L,"媽媽", "女", 28));
userList.add(new User(4L,"爺爺", "男", 64));
userList.add(new User(5L,"奶奶", "女", 62));
}
/**
* @Description: 批量保存用戶
*/
@PostMapping("save-user")
public Object saveUser() {
return userService.insertForeach(userList);
}
/**
* @Description: 獲取用戶列表
*/
@GetMapping("list-user")
public Object listUser() {
return userService.list();
}
三、測試驗證
1、批量插入數據
請求接口
localhost:8084/save-user
我們可以從商品接口代碼中可以看出,它會批量插入5條數據。我們先看控制台輸出SQL語句
我們可以從SQL語句可以看出 master0數據源 中 tab_user0 表插入了三條數據
,而 tab_user1 表中插入兩條數據
。
我們再來看數據庫
master.tab_user0
master.tab_user1
完成分表插入數據。
2、獲取數據
我們來獲取列表接口的SQL。
select * from tab_user
請求接口結果
結論
從接口返回的結果可以很明顯的看出,數據存儲在master主庫,而數據庫的讀取在slave從庫。
注意
ShardingSphere並不支持CASE WHEN
、HAVING
、UNION (ALL)
,有限支持子查詢
。這個官網有詳細說明。
Github地址
:https://github.com/yudiandemingzi/spring-boot-sharding-sphere
參考
我相信,無論今后的道路多么坎坷,只要抓住今天,遲早會在奮斗中嘗到人生的甘甜。抓住人生中的一分一秒,勝過虛度中的一月一年!(20)