簡介
在正常項目開發過程中,如果MySQL版本從5.6升級到5.7版本。作為DBA在考慮數據庫版本升級帶來的影響時,一般會有幾個注意點:
sql_mode
默認值的改變optimizer_switch
值的改變- 備庫升級影響主備復制
本文主要內容是MySQL升級到5.7版本之后,由於默認的sql_mode
值帶來的坑以及對應的解決方案。案例一:ONLY_FULL_GROUP_BY
問題描述
MySQL版本從5.6升級至5.7之后,部分SQL執行報錯,報錯信息如下:1
ERROR 1055 (42000): Expression #3 of XXXXXX list is not in GROUP BY clause and contains nonaggregated column ‘XXXXX.XXXXXX’ which is not functionally dependent on columns in GROUP BY clause; this is incompatible with sql_mode=only_full_group_by
這個問題原因在於從5.6升級至5.7版本后 sql_mode
默認值發生了改變,在5.7版本的 sql_mode
默認值中有意向 ONLY_FULL_GROUP_BY
,該選項的含義表示:對於使用 GROUP BY
進行查詢的SQL,不允許 SELECT
部分出現 GROUP BY
中未出現的字段,也就是 SELECT
查詢的字段必須是 GROUP BY
中出現的或者使用聚合函數的或者是具有唯一屬性的。
解決方案
- 方案一(不推薦):修改5.7版本
sql_mode
值,將ONLY_FULL_GROUP_BY
去掉ONLY_FULL_GROUP_BY
是加強SQL規范的,其目的是讓SQL查詢出來的結果更符合規范,更准確。
如果沒有ONLY_FULL_GROUP_BY
規范限制,那么則能允許以下SQL的執行:SELECT a,b,c FROM t GROUP BY a
。SQL按照a字段值進行分組,當同一個a字段值對應多個b或者c值時,查詢結果中的b,c值是不確定的。 - 方案二:對於不符合
ONLY_FULL_GROUP_BY
限制的字段,添加unique索引 - 方案三:改寫SQL,按照規范編寫SQL
- 方案四:使用ANY_VALUE(),對於不符合
ONLY_FULL_GROUP_BY
的字段使用ANY_VALUE()函數,讓MySQL跳過ONLY_FULL_GROUP_BY
檢測1
2
3
4
5
6mysql> SELECT name, address, MAX(age) FROM t GROUP BY name;
ERROR 1055 (42000): Expression #2 of SELECT list is not in GROUP
BY clause and contains nonaggregated column 'mydb.t.address' which
is not functionally dependent on columns in GROUP BY clause; this
is incompatible with sql_mode=only_full_group_by
mysql>SELECT name, ANY_VALUE(address), MAX(age) FROM t GROUP BY name;
案例二:NO_ZERO_DATE & NO_ZERO_IN_DATE & time_zone
問題描述
排錯階段一
MySQL版本從5.6升級至5.7之后,創建表的過程中失敗:
1 |
mysql> CREATE TABLE `t_manager` ( |
錯誤提示 MODIFY_DATETIME
字段設置的默認值是無效的,考慮到剛從5.6版本升級到5.7版本,於是又去翻了翻5.7中默認的 sql_mode
值。結果發現了兩個可能存在影響的選項:
NO_ZERO_DATE
:MySQL中插入的時間字段值,不允許日期為零NO_ZERO_IN_DATE
:MySQL中插入的時間字段值,不允許日期和月份為零排錯階段二
於是解決方案就是按照NO_ZERO_DATE
以及NO_ZERO_IN_DATE
的要求設置默認值,將MODIFY_DATETIME
字段默認值設置為’1001-01-01 01:01:01’,結果發現還是無法成功創建表:1
2
3
4
5
6
7
8
9
10mysql>CREATE TABLE `t_manager` (
.....
-> `CREATE_DATETIME` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創建時間',
-> `MODIFIER` varchar(32) DEFAULT NULL COMMENT '更新人',
-> `MODIFY_DATETIME` timestamp NOT NULL DEFAULT '1001-01-01 01:01:01' ON UPDATE CURRENT_TIMESTAMP COMMENT '修改時間',
-> `IS_DELETED` bit(1) DEFAULT b'0' COMMENT '刪除狀態 1:刪除 0:未刪除',
-> `IS_ENABLE` bit(1) DEFAULT b'1' COMMENT '啟用狀態 1:啟用 0:禁用',
-> PRIMARY KEY (`CACHE_ID`)
-> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
ERROR 1067 (42000): Invalid default value for 'MODIFY_DATETIME'
查看了所有的 sql_mode
值,都符合規范,但是表還是創建不成功。只好去官方手冊上找找timestamp介紹:
The TIMESTAMP data type is used for values that contain both date and time parts. TIMESTAMP has a range of ‘1970-01-01 00:00:01’ UTC to ‘2038-01-19 03:14:07’ UTC.
排錯階段三
可以看到官方定義中timestamp字段值的范圍是’1970-01-01 00:00:01’到’2038-01-19 03:14:07’,原來是我們設置的默認值不在timestamp范圍之內。於是再次修改默認值:
1 |
mysql>CREATE TABLE `t_manager` ( |
邪了門,居然還是無法成功創建表。實在是沒轍了,向同事求救,同事說他在機器上試試,結果同樣的語句在他的MySQL上執行成功,同樣是5.7.23版本。
百思不得其解。
一氣之下將兩邊的參數值拿出來對比了一下,果然找到了不同的根本。
測試環境 | 同事環境 |
---|---|
system_time_zone=CST | system_time_zone UTC |
time_zone=’+08:00’ | time_zone=SYSTEM |
回過頭來看timestamp字段定義的范圍:
The TIMESTAMP data type is used for values that contain both date and time parts. TIMESTAMP has a range of ‘1970-01-01 00:00:01’ UTC to ‘2038-01-19 03:14:07’ UTC.
這個時間范圍指的是UTC時區的時間范圍,測試環境設置了CST東八區的時區,則對應的時間范圍上也需要對應的加8小時。所以將timestamp字段默認值修改為’1970-01-01 08:00:01’,表終於創建成功。
1 |
mysql>CREATE TABLE `mn_cache_refresh_manager` ( |
解決方案
- 將timestamp字段默認值修改為對應CST時區的最小值’1970-01-01 08:00:01’
總結
最后總結一下MySQL中5.7中sql_mode參數默認值的幾個意思 - ONLY_FULL_GROUP_BY
對於使用GROUP BY
進行查詢的SQL,不允許SELECT
部分出現GROUP BY
中未出現的字段,也就是SELECT
查詢的字段必須是GROUP BY
中出現的或者使用聚合函數的或者是具有唯一屬性的。 - STRICT_TRANS_TABLES
該選項針對事務性存儲引擎生效,對於非事務性存儲引擎無效,該選項表示開啟strict sql模式。在strict sql模式下,在INSERT或者UPDATE語句中,插入或者更新了某個不符合規定的字段值,則會直接報錯中斷操作 - NO_ZERO_IN_DATE
MySQL中插入的時間字段值,不允許日期和月份為零 - NO_ZERO_DATE
MySQL中插入的時間字段值,不允許日期為零 - ERROR_FOR_DIVISION_BY_ZERO
INSERT或者UPDATE語句中,如果數據被0除,則出現警告(非strict sql模式下)或者錯誤(strict sql模式下)。- 當該選項關閉時,數字被0除,得到NULL且不會產生警告
- 當該選項開啟且處於非strict sql模式下,數字被0除,得到NULL但是會產生警告
- 當該選項開啟且處於strict sql模式下,數字被0除,產生錯誤且中斷操作
- NO_AUTO_CREATE_USER
之前版本中使用GRANT語法,如果用戶不存在則會自動創建用戶,該選項限制該功能 - NO_ENGINE_SUBSTITUTION
在使用CREATE TABLE或者ALTER TABLE語法執行存儲引擎的時候,如果設定的存儲引擎被禁用或者未編譯,會產生錯誤。