Mysql效能測試診斷

來源:互聯網
上載者:User

標籤:

  mysql> showglobal status; 

  可以列出mysql伺服器運行各種狀態值,另外,查詢mysql伺服器配置資訊語句:

mysql> showvariables;

一、慢查詢

mysql> showvariables like ‘%slow%‘;
+------------------+-------+
| variable_name | value |
+------------------+-------+
|log_slow_queries | on |
|slow_launch_time | 2 |
+------------------+-------+

mysql> showglobal status like ‘%slow%‘;
+---------------------+-------+
| variable_name | value |
+---------------------+-------+
|slow_launch_threads | 0 |
| slow_queries | 4148 |
+---------------------+-------+

配置中開啟了記錄慢查詢,執行時間超過2秒的即為慢查詢,系統顯示有4148個慢查詢,你可以分析慢查詢日誌,找出有問題的sql語句,慢查詢時間不宜設定過長,否則意義不大,最好在5秒以內,如果你需要微秒層級的慢查詢,可以考慮給mysql打補丁:http://www.percona.com/docs/wiki/release:start,記得找對應的版本。

開啟慢查詢日誌可能會對系統效能有一點點影響,如果你的mysql是主-從結構,可以考慮開啟其中一台從伺服器的慢查詢日誌,這樣既可以監控慢查詢,對系統效能影響又小。

二、串連數

經常會遇見”mysql: error 1040: too many connections”的情況,一種是訪問量確實很高,mysql伺服器抗不住,這個時候就要考慮增加從伺服器分散讀壓力,另外一種情況是mysql設定檔中max_connections值過小:

mysql> show variables like ‘max_connections‘;
+-----------------+-------+
| variable_name
 | value |
+-----------------+-------+
| max_connections | 256
 |
+-----------------+-------+

這台mysql伺服器最大串連數是256,然後查詢一下伺服器響應的最大串連數:

mysql> show global status like ‘max_used_connections‘;

mysql伺服器過去的最大串連數是245,沒有達到伺服器串連數上限256,應該沒有出現1040錯誤,比較理想的設定是

max_used_connections / max_connections * 100% ≈ 85%

最大串連數占上限串連數的85%左右,如果發現比例在10%以下,mysql伺服器串連數上限設定的過高了。

三、key_buffer_size

key_buffer_size是對myisam表效能影響最大的一個參數,下面一台以myisam為主要儲存引擎伺服器的配置:

mysql> show variables like‘key_buffer_size‘;+-----------------+------------+
| variable_name
 | value |
+-----------------+------------+
| key_buffer_size | 536870912 |
+-----------------+------------+

分配了512mb記憶體給key_buffer_size,我們再看一下key_buffer_size的使用方式:

mysql> show global status like ‘key_read%‘;
+------------------------+-------------+
| variable_name
 | value |
+------------------------+-------------+
| key_read_requests
 | 27813678764 |
| key_reads
 | 6798830 |
+------------------------+-------------+

  一共有27813678764個索引讀取請求,有6798830個請求在記憶體中沒有找到直接從硬碟讀取索引,計算索引未命中緩衝的機率:

key_cache_miss_rate = key_reads / key_read_requests * 100%

比如上面的資料,key_cache_miss_rate為0.0244%,4000個索引讀取請求才有一個直接讀硬碟,已經很bt了,key_cache_miss_rate在0.1%以下都很好(每1000個請求有一個直接讀硬碟),如果key_cache_miss_rate在0.01%以下的話,key_buffer_size分配的過多,可以適當減少。

mysql伺服器還提供了key_blocks_*參數:

mysql> show global status like ‘key_blocks_u%‘;
+------------------------+-------------+
| variable_name
 | value |
+------------------------+-------------+
| key_blocks_unused
 | 0 |
| key_blocks_used
 | 413543 |
+------------------------+-------------+

key_blocks_unused表示未使用的緩衝簇(blocks)數,key_blocks_used表示曾經用到的最大的blocks數,比如這台伺服器,所有的緩衝都用到了,要麼增加key_buffer_size,要麼就是過渡索引了,把緩衝佔滿了。比較理想的設定:

key_blocks_used / (key_blocks_unused + key_blocks_used) * 100% ≈ 80%

四、暫存資料表

mysql> show global status like ‘created_tmp%‘;
+-------------------------+---------+
| variable_name
 | value |
+-------------------------+---------+
| created_tmp_disk_tables | 21197
 |
| created_tmp_files
 | 58 |
| created_tmp_tables
 | 1771587 |
+-------------------------+---------+

每次建立暫存資料表,created_tmp_tables增加,如果是在磁碟上建立暫存資料表,created_tmp_disk_tables也增加,created_tmp_files表示mysql服務建立的臨時檔案檔案數,比較理想的配置是:

created_tmp_disk_tables /created_tmp_tables * 100% <= 25%比如上面的伺服器created_tmp_disk_tables / created_tmp_tables * 100% = 1.20%,應該相當好了。我們再看一下mysql伺服器對暫存資料表的配置:

mysql> show variables where variable_name in (‘tmp_table_size‘,‘max_heap_table_size‘);
+---------------------+-----------+
| variable_name
 | value |
+---------------------+-----------+
| max_heap_table_size | 268435456 |
| tmp_table_size
 | 536870912 |
+---------------------+-----------+

只有256mb以下的暫存資料表才能全部放記憶體,超過的就會用到硬碟暫存資料表。

五、open table情況

mysql> show global status like ‘open%tables%‘;
+---------------+-------+
| variable_name | value |
+---------------+-------+
| open_tables
 | 919 |
| opened_tables | 1951
 |
+---------------+-------+

open_tables表示開啟表的數量,opened_tables表示開啟過的表數量,如果opened_tables數量過大,說明配置中table_cache(5.1.3之後這個值叫做table_open_cache)值可能太小,我們查詢一下伺服器table_cache值:

mysql> show variables like ‘table_cache‘;
+---------------+-------+
| variable_name | value |
+---------------+-------+
| table_cache
 | 2048 |
+---------------+-------+

比較合適的值為:

open_tables / opened_tables * 100% >= 85%

open_tables / table_cache * 100% <= 95%

六、進程使用方式

mysql> show global status like ‘thread%‘;
+-------------------+-------+
| variable_name
 | value |
+-------------------+-------+
| threads_cached
 | 46 |
| threads_connected | 2
 |
| threads_created
 | 570 |
| threads_running
 | 1 |
+-------------------+-------+

如果我們在mysql伺服器設定檔中設定了thread_cache_size,當用戶端斷開之後,伺服器處理此客戶的線程將會緩衝起來以響應下一個客戶而不是銷毀(前提是緩衝數未達上限)。threads_created表示建立過的線程數,如果發現threads_created值過大的話,表明mysql伺服器一直在建立線程,這也是比較耗資源,可以適當增加設定檔中thread_cache_size值,查詢服務器thread_cache_size配置:

mysql> show variables like ‘thread_cache_size‘;
+-------------------+-------+
| variable_name
 | value |
+-------------------+-------+
| thread_cache_size | 64
 |
+-------------------+-------+

樣本中的伺服器還是挺健康的。

七、查詢快取(query cache)

mysql> show global status like ‘qcache%‘;
+-------------------------+-----------+
| variable_name
 | value |
+-------------------------+-----------+
| qcache_free_blocks
 | 22756 |
| qcache_free_memory
 | 76764704 |
| qcache_hits
 | 213028692 |
| qcache_inserts
 | 208894227 |
| qcache_lowmem_
prunes | 4010916 |
| qcache_not_cached
 | 13385031 |
| qcache_queries_in_cache | 43560
 |
| qcache_total_blocks
 | 111212 |
+-------------------------+-----------+

mysql查詢快取變數解釋:

qcache_free_blocks:緩衝中相鄰記憶體塊的個數。數目大說明可能有片段。flush query cache會對緩衝中的片段進行整理,從而得到一個空閑塊。

qcache_free_memory:緩衝中的空閑記憶體。

qcache_hits:每次查詢在緩衝中命中時就增大

qcache_inserts:每次插入一個查詢時就增大。叫用次數除以插入次數就是不中比率。

qcache_lowmem_prunes:緩衝出現記憶體不足並且必須要進行清理以便為更多查詢提供空間的次數。這個數字最好長時間來看;如果這個數字在不斷增長,就表示可能片段非常嚴重,或者記憶體很少。(上面的free_blocks和free_memory可以告訴您屬於哪種情況)

qcache_not_cached:不適合進行緩衝的查詢的數量,通常是由於這些查詢不是 select 語句或者用了now()之類的函數。

qcache_queries_in_cache:當前緩衝的查詢(和響應)的數量。

qcache_total_blocks:緩衝中塊的數量。

我們再查詢一下伺服器關於query_cache的配置:

mysql> show variables like ‘query_cache%‘;
+------------------------------+-----------+
| variable_name
 | value |
+------------------------------+-----------+
| query_cache_limit
 | 2097152 |
| query_cache_min_res_unit
 | 4096 |
| query_cache_size
 | 203423744 |
| query_cache_type
 | on |
| query_cache_wlock_invalidate | off
 |
+------------------------------+-----------+

各欄位的解釋:

query_cache_limit:超過此大小的查詢將不緩衝

query_cache_min_res_unit:緩衝塊的最小大小

query_cache_size:查詢快取大小

query_cache_type:緩衝類型,決定緩衝什麼樣的查詢,樣本中表示不緩衝 select sql_no_cache 查詢

query_cache_wlock_invalidate:當有其他用戶端正在對myisam表進行寫操作時,如果查詢在query cache中,是否返回cache結果還是等寫操作完成再讀表擷取結果。

query_cache_min_res_unit的配置是一柄”雙刃劍”,預設是4kb,設定值大對大資料查詢有好處,但如果你的查詢都是小資料查詢,就容易造成記憶體片段和浪費。

查詢快取片段率 = qcache_free_blocks /qcache_total_blocks * 100%

如果查詢快取片段率超過20%,可以用flush query cache整理緩衝片段,或者試試減小query_cache_min_res_unit,如果你的查詢都是小資料量的話。

查詢快取利用率 = (query_cache_size -qcache_free_memory) / query_cache_size * 100%

查詢快取利用率在25%以下的話說明query_cache_size設定的過大,可適當減小;查詢快取利用率在80%以上而且qcache_lowmem_prunes> 50的話說明query_cache_size可能有點小,要不就是片段太多。

查詢快取命中率 = (qcache_hits - qcache_inserts) /qcache_hits * 100%

樣本伺服器查詢快取片段率= 20.46%,查詢快取利用率= 62.26%,查詢快取命中率= 1.94%,命中率很差,可能寫操作比較頻繁吧,而且可能有些片段。

八、排序使用方式

mysql> show global status like ‘sort%‘;
+-------------------+------------+
| variable_name
 | value |
+-------------------+------------+
| sort_merge_passes | 29
 |
| sort_range
 | 37432840 |
| sort_rows
 | 9178691532 |
| sort_scan
 | 1860569 |
+-------------------+------------+

sort_merge_passes 包括兩步。mysql 首先會嘗試在記憶體中做排序,使用的記憶體大小由系統變數sort_buffer_size 決定,如果它的大小不夠把所有的記錄都讀到記憶體中,mysql 就會把每次在記憶體中排序的結果存到臨時檔案中,等 mysql 找到所有記錄之後,再把臨時檔案中的記錄做一次排序。這再次排序就會增加sort_merge_passes。實際上,mysql 會用另一個臨時檔案來存再次排序的結果,所以通常會看到sort_merge_passes 增加的數值是建臨時檔案數的兩倍。因為用到了臨時檔案,所以速度可能會比較慢,增加 sort_buffer_size 會減少 sort_merge_passes 和建立臨時檔案的次數。但盲目的增加 sort_buffer_size並不一定能提高速度,見 how fast can you sort data with mysql?(引自http://qroom.blogspot.com/2007/09/mysql-select-sort.html,貌似被牆)

另外,增加read_rnd_buffer_size(3.2.3是record_rnd_buffer_size)的值對排序的操作也有一點的好處,參見:http://www.mysqlperformanceblog.com/2007/07/24/what-exactly-is-read_rnd_buffer_size/

九、檔案開啟數(open_files)

mysql> show global status like ‘open_files‘;
+---------------+-------+
| variable_name | value |
+---------------+-------+
| open_files
 | 1410 |
+---------------+-------+

mysql> show variables like ‘open_files_limit‘;
+------------------+-------+
| variable_name
 | value |
+------------------+-------+
| open_files_limit | 4590
 |
+------------------+-------+

比較合適的設定:open_files / open_files_limit * 100%<= 75%

十、表鎖情況

mysql> show global status like ‘table_locks%‘;
+-----------------------+-----------+
| variable_name
 | value |
+-----------------------+-----------+
| table_locks_immediate | 490206328 |
| table_locks_waited
 | 2084912 |
+-----------------------+-----------+

table_locks_immediate表示立即釋放表鎖數,table_locks_waited表示需要等待的表鎖數,如果table_locks_immediate /table_locks_waited > 5000,最好採用innodb引擎,因為innodb是行鎖而myisam是表鎖,對於高並發寫入的應用innodb效果會好些。樣本中的伺服器table_locks_immediate/ table_locks_waited = 235,myisam就足夠了。

十一、表掃描情況

mysql> show global status like ‘handler_read%‘;
+-----------------------+-------------+
| variable_name
 | value |
+-----------------------+-------------+
| handler_read_first
 | 5803750 |
| handler_read_key
 | 6049319850 |
| handler_read_next
 | 94440908210 |
| handler_read_prev
 | 34822001724 |
| handler_read_rnd
 | 405482605 |
| handler_read_rnd_next | 18912877839 |
+-----------------------+-------------+

 

mysql> show global status like ‘com_select‘;
+---------------+-----------+
| variable_name | value
 |
+---------------+-----------+
| com_select
 | 222693559 |
+---------------+-----------+

計算表掃描率:

表掃描率= handler_read_rnd_next / com_select

如果表掃描率超過4000,說明進行了太多表掃描,很有可能索引沒有建好,增加read_buffer_size值會有一些好處,但最好不要超過8mb。

後記:

文中提到一些數字都是參考值,瞭解基本原理就可以,除了mysql提供的各種status值外,作業系統的一些效能指標也很重要,比如常用的top,iostat等,尤其是iostat,現在的系統瓶頸一般都在磁碟io上,關於iostat的使用

本文由飛翔的豬圈編輯整理,轉載自飛翔的豬圈http://www.001pp.com轉載請保留出處。

Mysql效能測試診斷

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.