1億條數據在PHP中實現Mysql數據庫分表100張


當數據量猛增的時候,大家都會選擇庫表散列等等方式去優化數據讀寫速度。筆者做了一個簡單的嘗試,1億條數據,分100張表。具體實現過程如下:

首先創建100張表:

 1 $i=0;  2 while($i<=99){  3 echo "$newNumber \r\n";  4 $sql="CREATE TABLE `code_".$i."` (  5  `full_code` char(10) NOT NULL,  6  `create_time` int(10) unsigned NOT NULL,  7  PRIMARY KEY (`full_code`),  8 ) ENGINE=MyISAM DEFAULT CHARSET=utf8";  9 mysql_query($sql); 10 $i++; 

下面說一下我的分表規則,full_code作為主鍵,我們對full_code做hash

函數如下:

1 $table_name=get_hash_table('code',$full_code); 2 function get_hash_table($table,$code,$s=100){ 3 $hash = sprintf("%u", crc32($code)); 4 echo $hash; 5 $hash1 = intval(fmod($hash, $s)); 6  return $table."_".$hash1; 7 } 

這樣插入數據前通過get_hash_table獲取數據存放的表名。

最后我們使用merge存儲引擎來實現一張完整的code表

1 CREATE TABLE IF NOT EXISTS `code` ( 2 `full_code` char(10) NOT NULL, 3 `create_time` int(10) unsigned NOT NULL, 4 INDEX(full_code) 5 ) TYPE=MERGE UNION=(code_0,code_1,code_2.......) INSERT_METHOD=LAST ; 

這樣我們通過select * from code就可以得到所有的full_code數據了。

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM