補充五:mysql緩沖和緩存設置


MySQL 可調節設置可以應用於整個 mysqld進程,也可以應用於單個客戶機會話。

表的緩存:table_cache

每個表都可以表示為磁盤上的一個文件,必須先打開,后讀取。

為了加快從文件中讀取數據的過程,mysqld對這些打開文件進行了緩存,其最大數目由 /etc/mysqld.conf 中的table_cache 指定。清單 4給出了顯示與打開表有關的活動的方式。

清單 4. 顯示打開表的活動

mysql> show status like 'open%tabgles';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Open_tables   | 5000  |
| Opened_tables | 195   |
+---------------+-------+
2 rows in set (0.00 sec)

清單 4 說明目前有 5,000 個表是打開的,有 195個表需要打開,因為現在緩存中已經沒有可用文件描述符了(由於統計信息在前面已經清除了,因此可能會存在 5,000 個打開表中只有 195個打開記錄的情況)。

如果 Opened_tables 隨着重新運行SHOW STATUS命令快速增加,就說明緩存命中率不夠。

如果Open_tables 比table_cache設置小很多,就說明該值太大了(不過有空間可以增長總不是什么壞事)。

例如,使用 table_cache =5000可以調整表的緩存。

 

線程的緩存:thread_cache

與表的緩存類似,對於線程來說也有一個緩存。 

mysqld在接收連接時會根據需要生成線程。

在一個連接變化很快的繁忙服務器上,對線程進行緩存便於以后使用可以加快最初的連接。

清單 5 顯示如何確定是否緩存了足夠的線程。

清單 5. 顯示線程使用統計信息

mysql> show status like 'threads%';
+-------------------+--------+
| Variable_name     | Value  |
+-------------------+--------+
| Threads_cached    | 27     |
| Threads_connected | 15     |
| Threads_created   | 838610 |
| Threads_running   | 3      |
+-------------------+--------+
4 rows in set (0.00 sec)

 

 

此處重要的值是 Threads_created,每次mysqld 需要創建一個新線程時,這個值都會增加。

如果這個數字在連續執行SHOW STATUS 命令時快速增加,就應該嘗試增大線程緩存。

例如,可以在my.cnf 中使用 thread_cache = 40 來實現此目的。

 

關鍵字緩存:key_buffer

關鍵字緩沖區保存了 MyISAM 表的索引塊。

理想情況下,對於這些塊的請求應該來自於內存,而不是來自於磁盤。

清單 6顯示了如何確定有多少塊是從磁盤中讀取的,以及有多少塊是從內存中讀取的。

清單 6. 確定關鍵字效率

mysql> show status like '%key_read%';
+-------------------+-----------+
| Variable_name     | Value     |
+-------------------+-----------+
| Key_read_requests | 163554268 |
| Key_reads         | 98247     |
+-------------------+-----------+
2 rows in set (0.00 sec)

 

 Key_reads 代表命中磁盤的請求個數,Key_read_requests是總數。

命中磁盤的讀請求數除以讀請求總數就是不中比率

—— 在本例中每 1,000 個請求,大約有 0.6 個沒有命中內存。

如果每1,000 個請求中命中磁盤的數目超過 1 個,就應該考慮增大關鍵字緩沖區了。

例如,key_buffer =384M 會將緩沖區設置為 384MB。

 

臨時表的緩存:tmp_table_size和 max_heap_table_size

臨時表可以在更高級的查詢中使用,其中數據在進一步進行處理(例如 GROUPBY字句)之前,都必須先保存到臨時表中;理想情況下,在內存中創建臨時表。

但是如果臨時表變得太大,就需要寫入磁盤中。

清單 7給出了與臨時表創建有關的統計信息。

清單 7. 確定臨時表的使用

mysql> SHOW STATUS LIKE 'created_tmp%';
+-------------------------+-------+
| Variable_name           | Value |
+-------------------------+-------+
| Created_tmp_disk_tables | 30660 |
| Created_tmp_files       | 2     |
| Created_tmp_tables      | 32912 |
+-------------------------+-------+
3 rows in set (0.00 sec)

 

 每次使用臨時表都會增大 Created_tmp_tables;基於磁盤的表也會增大 Created_tmp_disk_tables

對於這個比率,並沒有什么嚴格的規則,因為這依賴於所涉及的查詢。

長時間觀察Created_tmp_disk_tables會顯示所創建的磁盤表的比率,您可以確定設置的效率。tmp_table_size和 max_heap_table_size都可以控制臨時表的最大大小,因此請確保在 my.cnf 中對這兩個值都進行了設置。

 

每個會話的緩存:

這些設置針對於每個會話,即每個會話都會使用此設置。

在設置這些數字時要十分謹慎,因為它們在乘以可能存在的連接數時候,這些選項表示大量的內存!

您可以通過代碼修改會話中的這些數字,或者在 my.cnf 中為所有會話修改這些設置。

當 MySQL必須要進行排序時,就會在從磁盤上讀取數據時分配一個排序緩沖區來存放這些數據行。

如果要排序的數據太大,那么數據就必須保存到磁盤上的臨時文件中,並再次進行排序。

如果sort_merge_passes狀態變量很大,這就指示了磁盤的活動情況。

清單 8 給出了一些與排序相關的狀態計數器信息。

清單 8. 顯示排序統計信息

mysql > show status like 'sort%';
+-------------------+---------+
| Variable_name     | Value   |
+-------------------+---------+
| Sort_merge_passes | 1       |
| Sort_range        | 79192   |
| Sort_rows         | 2066532 |
| Sort_scan         | 44006   |
+-------------------+---------+
4 rows in set (0.00 sec)

 

如果 sort_merge_passes 很大,就表示需要注意sort_buffer_size

例如,sort_buffer_size = 4M將排序緩沖區設置為 4MB。

 

掃描率緩存:read_buffer_size 

MySQL也會分配一些內存來讀取表。

理想情況下,索引提供了足夠多的信息,可以只讀入所需要的行,但是有時候查詢(設計不佳或數據本性使然)需要讀取表中大量數據。

要理解這種行為,需要知道運行了多少個 SELECT語句,以及需要讀取表中的下一行數據的次數(而不是通過索引直接訪問)。實現這種功能的命令如清單 9 所示。

清單 9. 確定表掃描比率

mysql> show status like "com_select";
+---------------+--------+
| Variable_name | Value  |
+---------------+--------+
| Com_select    | 318243 |
+---------------+--------+
1 row in set (0.00 sec)

mysql> show status like "handler_read_rnd_next";
+-----------------------+-----------+
| Variable_name         | Value     |
+-----------------------+-----------+
| Handler_read_rnd_next | 165959471 |
+-----------------------+-----------+
1 row in set (0.00 sec)

 

 

 Handler_read_rnd_next /Com_select 得出了表掃描比率 —— 在本例中是 521:1。

如果該值超過4000,就應該查看 read_buffer_size,例如read_buffer_size = 4M

如果這個數字超過了8M,就應該與開發人員討論一下對這些查詢進行調優了!

 

查詢緩存:query_cache_size,謹慎開啟

查看數據庫緩存配置情況

mysql> show variables like '%query_cache%';
+——————————+———+
| Variable_name | Value |
+——————————+———+
| have_query_cache | YES | –查詢緩存是否可用
| query_cache_limit | 1048576 | –可緩存具體查詢結果的最大值
| query_cache_min_res_unit | 4096 |
| query_cache_size | 599040 | –查詢緩存的大小
| query_cache_type | ON | –阻止或是支持查詢緩存
| query_cache_wlock_invalidate | OFF |
+——————————+———+

 

配置方法:

在MYSQL的配置文件my.ini或my.cnf中找到如下內容:

# Query cache is used to cache SELECT results and later returnthem

# without actual executing the same query once again. Having thequery

# cache enabled may result in significant speed improvements, ifyour

# have a lot of identical queries and rarely changing tables.See the

# "Qcache_lowmem_prunes" status variable to check if the currentvalue

# is high enough for your load.

# Note: In case your tables change very often or if your queriesare

# textually different every time, the query cache may result ina

# slowdown instead of a performance improvement.

query_cache_size=0

以上信息是默認配置,其注釋意思是說,MYSQL的查詢緩存用於緩存select查詢結果,並在下次接收到同樣的查詢請求時,不再執行實際查詢處理而直接返回結果,有這樣的查詢緩存能提高查詢的速度,使查詢性能得到優化,前提條件是你有大量的相同或相似的查詢,而很少改變表里的數據,否則沒有必要使用此功能。

可以通過Qcache_lowmem_prunes變量的值來檢查是否當前的值滿足你目前系統的負載。注意:如果你查詢的表更新比較頻繁,而且很少有相同的查詢,最好不要使用查詢緩存。

具體配置方法:

1. 將query_cache_size設置為具體的大小,具體大小是多少取決於查詢的實際情況,但最好設置為1024的倍數,參考值32M。

2. 增加一行:query_cache_type=1

query_cache_type參數用於控制緩存的類型,注意這個值不能隨便設置,必須設置為數字,可選項目以及說明如下:

如果設置為0,那么可以說,你的緩存根本就沒有用,相當於禁用了。但是這種情況下query_cache_size設置的大小系統是否要為其分配呢,這個問題有待於測試?

如果設置為1,將會緩存所有的結果,除非你的select語句使用SQL_NO_CACHE禁用了查詢緩存。

如果設置為2,則只緩存在select語句中通過SQL_CACHE指定需要緩存的查詢。

OK,配置完后的部分文件如下:

query_cache_size=128M

query_cache_type=1

保存文件,重新啟動MYSQL服務,然后通過如下查詢來驗證是否真正開啟了:

mysql> show variables like '%query_cache%';

+——————————+———–+
| Variable_name            |Value    |
+——————————+———–+
| have_query_cache          |YES      |
| query_cache_limit         |1048576   |
| query_cache_min_res_unit    |4096     |
| query_cache_size          | 134217728|
| query_cache_type          |ON       |
| query_cache_wlock_invalidate | OFF      |
+——————————+———–+

6 rows in set (0.00 sec)

 

主要看query_cache_size和query_cache_type的值是否跟我們設的一致:

這里query_cache_size的值是134217728,我們設置的是128M,實際是一樣的,只是單位不同,可以自己換算下:134217728 = 128*1024*1024。

query_cache_type設置為1,顯示為ON,這個前面已經說過了。

總之,看到上邊的顯示表示設置正確,但是在實際的查詢中是否能夠緩存查詢,還需要手動測試下,我們可以通過show statuslike '%Qcache%';語句來測試,現在我們開啟了查詢緩存功能,在執行查詢前,我們先看看相關參數的值:

mysql> show status like '%Qcache%';

+————————-+———–+
| Variable_name        |Value    |
+————————-+———–+
| Qcache_free_blocks     |1        |
| Qcache_free_memory     | 134208800|
| Qcache_hits          |0        |

 

MySQL querycache從4.1版本開始提供了,不過值今天本人才對其進行研究。

默認配置下,MySQL的該功能是沒有啟動的,可能你通過showvariables like'%query_cache%';會發現其變量have_query_cache的值是yes,MYSQL初學者很容易以為這個參數為YES就代表開啟了查詢緩存,實際上是不對的,該參數表示當前版本的MYSQL是否支持QueryCache,實際上是否開啟查詢緩存是看另外一個參數的值:query_cache_size ,該值為0,表示禁用querycache,而默認配置正是配置為0。

配置方法:

在MYSQL的配置文件my.ini或my.cnf中找到如下內容:

# Query cache is used to cache SELECT results and later returnthem

# without actual executing the same query once again. Having thequery

# cache enabled may result in significant speed improvements, ifyour

# have a lot of identical queries and rarely changing tables.See the

# "Qcache_lowmem_prunes" status variable to check if the currentvalue

# is high enough for your load.

# Note: In case your tables change very often or if your queriesare

# textually different every time, the query cache may result ina

# slowdown instead of a performance improvement.

query_cache_size=0

以上信息是默認配置,其注釋意思是說,MYSQL的查詢緩存用於緩存select查詢結果,並在下次接收到同樣的查詢請求時,不再執行實際查詢處理而直接返回結果,有這樣的查詢緩存能提高查詢的速度,使查詢性能得到優化,前提條件是你有大量的相同或相似的查詢,而很少改變表里的數據,否則沒有必要使用此功能。可以通過Qcache_lowmem_prunes變量的值來檢查是否當前的值滿足你目前系統的負載。注意:如果你查詢的表更新比較頻繁,而且很少有相同的查詢,最好不要使用查詢緩存。

具體配置方法:

1.將query_cache_size設置為具體的大小,具體大小是多少取決於查詢的實際情況,但最好設置為1024的倍數,參考值32M。

2. 增加一行:query_cache_type=1

query_cache_type參數用於控制緩存的類型,注意這個值不能隨便設置,必須設置為數字,可選項目以及說明如下:

如果設置為0,那么可以說,你的緩存根本就沒有用,相當於禁用了。但是這種情況下query_cache_size設置的大小系統是否要為其分配呢,這個問題有待於測試?

如果設置為1,將會緩存所有的結果,除非你的select語句使用SQL_NO_CACHE禁用了查詢緩存。

如果設置為2,則只緩存在select語句中通過SQL_CACHE指定需要緩存的查詢。

OK,配置完后的部分文件如下:

query_cache_size=128M

query_cache_type=1

保存文件,重新啟動MYSQL服務,然后通過如下查詢來驗證是否真正開啟了:

mysql> show variables like '%query_cache%';

+——————————+———–+
| Variable_name            |Value    |
+——————————+———–+
| have_query_cache          |YES      |
| query_cache_limit         |1048576   |
| query_cache_min_res_unit    |4096     |
| query_cache_size          | 134217728|
| query_cache_type          |ON       |
| query_cache_wlock_invalidate | OFF      |
+——————————+———–+

6 rows in set (0.00 sec)

 

主要看query_cache_size和query_cache_type的值是否跟我們設的一致:

這里query_cache_size的值是134217728,我們設置的是128M,實際是一樣的,只是單位不同,可以自己換算下:134217728 = 128*1024*1024。

query_cache_type設置為1,顯示為ON,這個前面已經說過了。

總之,看到上邊的顯示表示設置正確,但是在實際的查詢中是否能夠緩存查詢,還需要手動測試下,我們可以通過show statuslike '%Qcache%';語句來測試,現在我們開啟了查詢緩存功能,在執行查詢前,我們先看看相關參數的值:

mysql> show status like '%Qcache%';

+————————-+———–+
| Variable_name        |Value    |
+————————-+———–+
| Qcache_free_blocks     |1        |
| Qcache_free_memory     | 134208800|
| Qcache_hits          |0        |

 

 

 

參考:

https://blog.csdn.net/libaolin198706231987/article/details/50292799


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM