在對數據進行導入到新的機器時,出現錯誤 Row size too large (> 1982). Changing some columns to TEXT or BLOB or using ROW_FORMAT=DYNAMIC or ROW_FORMAT=COMPRESSED may help. In current row format, BLOB prefix of 768 bytes is stored inline.導致數據不能錄入。
baidu了一下發現,是表中有多個text字段導致的。
解決方式是在建表增加 ROW_FORMAT=COMPRESSED,然后再錄入數據就正常了。
詳細問題的描述、解決參考:http://blog.sina.com.cn/s/blog_8e9cceee0101k65j.html
原文如下:
前段時間在項目壓測的時候出現了mysql的大字段問題,導致數據層無法存儲。各方找人求助,都無果,最后求助萬能的google,找到國外高人的解決方案,一步步來,終於解決了。這后來也沒寫總結,只是寫了一篇簡單的有道雲筆記,結果今天線上的版本又出了這個問題,才不免責怪自己怎么沒有發一篇詳細博文記錄,以及及時的分享給兄弟們(沒辦法最近太忙了,忙出翔來了)。
【問題描述】
最早mysql端報這個錯
Row size too large. The maximum row size for the used table type, not counting BLOBs, is 8126. You have to change some columns to TEXT or BLOBs
今天線上版本的錯誤:
Caused by: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Row size too large (> 8126). Changing some columns to TEXT or BLOB or using ROW_FORMAT=DYNAMIC or ROW_FORMAT=COMPRESSED may help. In current row format, BLOB prefix of 768 bytes is stored inline.
【導致問題的原因】
總結了下原因是因為mysql-innodb是按照page存儲數據的,每個page max size是16k,然后每個page兩行數據,所以每行最大8k數據。如果你的字段是blob之類的話,會存儲在page之外的溢出區里。
但是innodb默認的approach(羚羊)存儲格式會把每個blob字段的前864個字節存儲在page里,所以你的blob超過一定數量的話,單行大小就會超過8k,所以就報錯了
【解決思路】
解決方式是使用innodb的Barracuda(梭魚) 存儲格式
這種格式對blob字段的處理方式是在page里頭只存儲一個20byte大小的指針,其它全存在溢出區,所以你輕易超不了8k
【詳細步驟】
1. 打開mysql的配置my.ini。在innodb配置出添加:innodb_file_per_table=1
2. 然后命令檢查下上述開關是否打開。
show variables like '%per_table%';
3. 設置mysql全局變量:innodb_file_format = Barracuda(梭魚)
命令:set GLOBAL innodb_file_format = 'Barracuda';
然后檢查下是否設置好了:
命令:show GLOBAL VARIABLES LIKE '%file_format%';
4. 設置對應表的屬性:ROW_FORMAT=COMPRESSED
然后檢查下標的屬性是否是你設置的:COMPRESSED
5. 如上步驟以后,就OK了
今天又讓tx折騰一天,MD。長記性,再忙也要記錄,要給團隊分享,希望我們團隊,我的兄弟們,我們公司積累越來越多的財富。
【補充】
1. 最后一定要檢查下相關表的屬性,一定要是COMPRESSED,如下圖
這點一定要注意,這是導致線上事故的一個重要原因