一、InnoDB一棵B+樹可以存放多少行數據?(約2千萬)
我們都知道計算機在存儲數據的時候,有最小存儲單元,這就好比我們今天進行現金的流通最小單位是一毛。在計算機中磁盤存儲數據最小單元是扇區,一個扇區的大小是512字節,而文件系統(例如XFS/EXT4)他的最小單元是塊,一個塊的大小是4k,而對於我們的InnoDB存儲引擎也有自己的最小儲存單元——頁(Page),一個頁的大小是16K。
磁盤扇區、文件系統、InnoDB存儲引擎都有各自的最小存儲單元。
在MySQL中我們的InnoDB頁的大小默認是16k,當然也可以通過參數設置:
SHOW VARIABLES LIKE 'innodb_page_size';
數據表中的數據都是存儲在頁中的,所以一個頁中能存儲多少行數據呢?
假設一行數據的大小是1k,那么一個頁可以存放16行這樣的數據。
用B+樹的方式組織這些數據。如圖所示:
我們先將數據記錄按主鍵進行排序,分別存放在不同的頁中(為了便於理解我們這里一個頁中只存放3條記錄,實際情況可以存放很多),除了存放數據的頁以外,還有存放鍵值+指針的頁,如圖中page number=3的頁,該頁存放鍵值和指向數據頁的指針,這樣的頁由N個鍵值+指針組成。當然它也是排好序的。這樣的數據組織形式,我們稱為索引組織表。
現在來看下,要查找一條數據,怎么查?如select * from user where id=5;
這里id是主鍵,我們通過這棵B+樹來查找
1首先找到根頁,你怎么知道user表的根頁在哪呢?其實每張表的根頁位置在表空間文件中是固定的,即page number=3的頁,
2通過二分查找法,定位到id=5的數據應該在指針P5指向的頁中,
3去page number=5的頁中查找,同樣通過二分查詢法即可找到id=5的記錄:
| 5 | zhao2 | 27 |
現在我們清楚了InnoDB中主鍵索引B+樹是如何組織數據、查詢數據的,我們總結一下:
1、InnoDB存儲引擎的最小存儲單元是頁,頁可以用於存放數據也可以用於存放鍵值+指針,在B+樹中葉子節點存放數據,非葉子節點存放鍵值+指針。
2、索引組織表通過非葉子節點的二分查找法以及指針確定數據在哪個頁中,進而在去數據頁中查找到需要的數據;
二、通常一棵B+樹可以存放多少行數據?
這里我們先假設B+樹高為2,即存在一個根節點和若干個葉子節點,那么這棵B+樹的存放總記錄數為:根節點指針數*單個葉子節點記錄行數。
上文我們已經說明單個葉子節點(頁)中的記錄數=16K(一頁16KB)/1K(假設一行1KB)=16。(這里假設一行記錄的數據大小為1k)。
那么現在我們需要計算出非葉子節點能存放多少指針?
其實這也很好算,我們假設主鍵ID為bigint類型,長度為8字節,而指針大小在InnoDB源碼中設置為6字節,這樣一共14字節,我們一個頁中能存放多少這樣的單元,其實就代表有多少指針,即16KB(16*1024=16384 byte)16384/14=1170(索引個數)。那么可以算出一棵高度為2的B+樹,能存放1170*16=18720條這樣的數據記錄。
根據同樣的原理我們可以算出一個高度為3的B+樹可以存放:1170(索引個數)*1170(索引個數)*16(每頁行數)=21902400(2千萬)條這樣的記錄。
所以在InnoDB中B+樹高度一般為1-3層,它就能滿足千萬級的數據存儲。在查找數據時一次頁的查找代表一次IO,所以通過主鍵索引查詢通常只需要1-3次IO操作即可查找到數據。
四、怎么得到InnoDB主鍵索引B+樹的高度?
上面我們通過推斷得出B+樹的高度通常是1-3,下面我們從另外一個側面證明這個結論。在InnoDB的表空間文件中,約定page number為3的代表主鍵索引的根頁,而在根頁偏移量為64的地方存放了該B+樹的page level。如果page level為1,樹高為2,page level為2,則樹高為3。即B+樹的高度=page level+1;下面我們將從實際環境中嘗試找到這個page level。
SELECT b.name, a.name, index_id, TYPE, a.`SPACE`, a.`PAGE_NO` FROM information_schema.`INNODB_SYS_INDEXES` a, information_schema.`INNODB_SYS_TABLES` b WHERE a.`TABLE_ID` = b.table_id AND a.`SPACE` <> 0 AND b.`NAME` = 'testdts/mycity'
可以看出數據庫testdts下的mycity表、mycity表主鍵索引根頁的page number均為3,而其他的二級索引page number為4。
B+樹高度為page level+1=3;region表的page level為0,B+樹高度為page level+1=1;customer表的page level為2,B+樹高度為page level+1=3;