MySQL查詢最佳化

標籤：緩衝   down   不同   each   between   相對   with   comm   arch   

查詢效能低下的原因是訪問了太多的資料

• 多表串連時返回了全部的列

select * from sakila.actor inner join sakila.file_actor using(actior_id)inner join sakila.film using(film_id)where sakila.film.title = ‘AronMan‘

正確的做法是這樣

select sakila.actor.* from sakila.actor inner join sakila.file_actor using(actior_id)inner join sakila.film using(film_id)where sakila.film.title = ‘AronMan‘

• 分解串連技術

select * from tagjoin tag_post on tag_post.tag_id=tag.idjoin post on tag_post.post_id=post.idwhere tag.tag=‘mysql‘

分解串連之後

select * from tag where tag=‘mysql‘select * from tag_post where tag_id=1234select * from post where post.id in(123,456,789)

分解串連看上去比較浪費，可是有巨大優勢

1. 緩衝效率高
2. MyISAM引擎下，鎖住表的時間短
3. 在應用程式端串連能夠更方便擴充資料庫，把表放在不同的資料庫server上
4. 查詢本身更高效
5. 降低多餘行的訪問

什麼時候使用分解串連？

1. 能夠緩衝大量查詢
2. 使用了多個MyISAM表
3. 資料分布在不同server
4. 對於大表使用in替換串連
5. 一個串連引用了同一個表多次

最佳化串連

1. 確保on或者using的列有索引
2. 確保group by 或者order by僅僅引用一個列。這樣能夠使用索引

悲觀鎖

select chairid from seat where booked is null for updateupdate seat set booked=‘x‘ where chairid=1commit

索引及查詢最佳化

摘取部分自mysql效能最佳化-慢查詢分析、最佳化索引和配置

索引的類型

? 普通索引：這是最主要的索引類型。沒唯一性之類的限制。

? 唯一性索引：和普通索引基本同樣。但全部的索引列值保持唯一性。

? 主鍵：主鍵是一種唯一索引，但必須指定為”PRIMARY KEY”。

? 全文索引：MYSQL從3.23.23開始支援全文索引和全文檢索索引。在MYSQL中。全文索引的索引類型為FULLTEXT。全文索引能夠在VARCHAR或者TEXT類型的列上建立。

使用多列索引 要注意最左首碼問題

有時MySQL不使用索引，即使有可用的索引。

一種情形是當最佳化器預計到使用索引將須要MySQL訪問表中的大部分行時。(在這樣的情況下，表掃描可能會更快些）。

然而，假設此類查詢使用LIMIT僅僅搜尋部分行。MySQL則使用索引，由於它能夠更快地找到幾行並在結果中返回。

合理的建立索引的建議：

(1) 越小的資料類型通常更好：越小的資料類型通常在磁碟、記憶體和CPU緩衝中都須要更少的空間。處理起來更快。

(2) 簡單的資料類型更好：整型資料比起字元，處理開銷更小，由於字串的比較更複雜。

在MySQL中，應該用內建的日期和時間資料類型。而不是用字串來儲存時間；以及用整數資料型別儲存IP地址。

(3) 盡量避免NULL：應該指定列為NOT NULL，除非你想儲存NULL。在MySQL中。含有空值的列非常難進行查詢最佳化。由於它們使得索引、索引的統計資訊以及比較運算更加複雜。你應該用0、一個特殊的值或者一個空串取代空值

這部分是關於索引和寫SQL語句時應當注意的一些瑣碎建議和注意點。

1. 當結果集僅僅有一行資料時使用LIMIT 1

2. 避免SELECT *。始終指定你須要的列

從表中讀取越多的資料。查詢會變得更慢。他添加了磁碟須要操作的時間，還是在資料庫server與WEBserver是獨立分開的情況下。你將會經曆非常漫長的網路延遲，僅僅是由於資料不必要的在server之間傳輸。

1. 使用串連（JOIN）來取代子查詢(Sub-Queries)。

   串連（JOIN）之所以更有效率一些。是由於MySQL不須要在記憶體中建立暫時表來完畢這個邏輯上的須要兩個步驟的查詢工作。

2. 使用ENUM、CHAR 而不是VARCHAR，使用合理的欄位屬性長度

3. 儘可能的使用NOT NULL

4. 固定長度的表會更快

5. 拆分大的DELETE 或INSERT 語句

6. 查詢的列越小越快

Where條件

在查詢中。WHERE條件也是一個比較重要的因素，盡量少而且是合理的where條件是非常重要的。盡量在多個條件的時候。把會提取盡量少資料量的條件放在前面。降低後一個where條件的查詢時間。

有些where條件會導致索引無效：

? where子句的查詢條件裡有！=。MySQL將無法使用索引。

? where子句使用了Mysql函數的時候，索引將無效，比方：select * from tb where left(name, 4) = ‘xxx’

? 使用LIKE進行搜尋匹配的時候。這樣索引是有效：select * from tbl1 where name like ‘xxx%’，而like ‘%xxx%’ 時索引無效

技巧整理

1、應盡量避免在 where 子句中使用!=或<>操作符，否則將引擎放棄使用索引而進行全表掃描。

2、對查詢進行最佳化。應盡量避免全表掃描，首先應考慮在 where 及 order by 涉及的列上建立索引。

3、應盡量避免在 where 子句中對欄位進行 null 值推斷，否則將導致引擎放棄使用索引而進行全表掃描，如：

select id from t where num is null

能夠在num上設定預設值0，確保表中num列沒有null值，然後這樣查詢：

select id from t where num=0

4、盡量避免在 where 子句中使用 or 來串連條件，否則將導致引擎放棄使用索引而進行全表掃描，如：

select id from t where num=10 or num=20

能夠這樣查詢：

select id from t where num=10union allselect id from t where num=20

5、以下的查詢也將導致全表掃描：(不能前置百分比符號)

select id from t where name like ‘%abc‘

若要提高效率，能夠考慮全文檢索索引。

6、in 和 not in 也要慎用。否則會導致全表掃描，如：

select id from t where num in(1,2,3)

對於連續的數值，能用 between 就不要用 in 了：

select id from t where num between 1 and 3

7、假設在 where 子句中使用參數，也會導致全表掃描。由於SQL僅僅有在執行時才會解析局部變數，但最佳化程式不能將訪問計劃的選擇延遲到執行時。它必須在編譯時間進行選擇。

然 而，假設在編譯時間建立訪問計劃。變數的值還是未知的，因而無法作為索引選擇的輸入項。

如以下語句將進行全表掃描：

select id from t where [email protected]

能夠改為強制查詢使用索引：

select id from t with(index(索引名)) where [email protected]

8、應盡量避免在 where 子句中對欄位進行運算式操作，這將導致引擎放棄使用索引而進行全表掃描。

如：

select id from t where num/2=100

應改為:

select id from t where num=100*2

9、應盡量避免在where子句中對欄位進行函數操作。這將導致引擎放棄使用索引而進行全表掃描。如：

select id from t where substring(name,1,3)=’abc’

應改為:

select id from t where name like ‘abc%’select id from t where createdate>=’2005-11-30′ and createdate<’2005-12-1′

10、不要在 where 子句中的“=”左邊進行函數、算術運算或其它運算式運算。否則系統將可能無法正確使用索引。

11、在使用索引欄位作為條件時，假設該索引是複合索引。那麼必須使用到該索引中的第一個欄位作為條件時才幹保證系統使用該索引。否則該索引將不會被使 用，而且應儘可能的讓欄位順序與索引順序相一致。

12、不要寫一些沒有意義的查詢。如須要產生一個空表結構：

select col1,col2 into #t from t where 1=0

這類代碼不會返回不論什麼結果集，可是會消耗系統資源的。應改成這樣：

create table #t(…)

13、非常多時候用 exists 取代 in 是一個好的選擇：

select num from a where num in(select num from b)

用以下的語句替換：

select num from a where exists(select 1 from b where num=a.num)

14、並非全部索引對查詢都有效，SQL是依據表中資料來進行查詢最佳化的。當索引列有大量資料反覆時，SQL查詢可能不會去利用索引，如一表中有欄位 sex，male、female差點兒各一半，那麼即使在sex上建了索引也對查詢效率起不了作用。

15、索引並非越多越好，索引固然能夠提高對應的 select 的效率，但同一時候也降低了 insert 及 update 的效率，由於 insert 或 update 時有可能會重建索引，所以如何建索引須要謹慎考慮，視詳細情況而定。一個表的索引數最好不要超過6個，若太多則應考慮一些不常使用到的列上建的索引是否有 必要。

16.應儘可能的避免更新 clustered 索引資料列，由於 clustered 索引資料列的順序就是表記錄的實體儲存體順序，一旦該列值改變將導致整個表記錄的順序的調整，會耗費相當大的資源。若應用系統須要頻繁更新 clustered 索引資料列。那麼須要考慮是否應將該索引建為 clustered 索引。

17、盡量使用數字型欄位，若僅僅含數值資訊的欄位盡量不要設計為字元型，這會降低查詢和串連的效能。並會添加儲存開銷。這是由於引擎在處理查詢和串連時會 逐個比較字串中每個字元，而對於數字型而言僅僅須要比較一次就夠了。

18、儘可能的使用 varchar/nvarchar 取代 char/nchar ，由於首先變長欄位儲存空間小，能夠節省儲存空間，其次對於查詢來說，在一個相對較小的欄位內搜尋效率顯然要高些。

19、不論什麼地方都不要使用 select * from t ，用詳細的欄位列表取代“*”，不要返回用不到的不論什麼欄位。

20、盡量使用表變數來取代暫時表。假設表變數包括大量資料，請注意索引非常有限（僅僅有主鍵索引）。

21、避免頻繁建立和刪除暫時表。以降低系統資料表資源的消耗。

22、暫時表並非不可使用，適當地使用它們能夠使某些常式更有效，比如，當須要反覆引用大型表或經常使用表中的某個資料集時。可是，對於一次性事件，最好使 用匯出表。

23、在建立暫時表時，假設一次性插入資料量非常大。那麼能夠使用 select into 取代 create table。避免造成大量 log 。以提快速度；假設資料量不大，為了緩和系統資料表的資源，應先create table，然後insert。

24、假設使用到了暫時表。在預存程序的最後務必將全部的暫時表顯式刪除。先 truncate table ，然後 drop table ，這樣能夠避免系統資料表的較長時間鎖定。

25、盡量避免使用遊標，由於遊標的效率較差。假設遊標操作的資料超過1萬行，那麼就應該考慮改寫。

26、使用基於遊標的方法或暫時表方法之前。應先尋找基於集的解決方式來解決這個問題，基於集的方法通常更有效。

27、與暫時表一樣。遊標並非不可使用。對小型資料集使用 FAST_FORWARD 遊標通常要優於其它逐行處理方法，尤其是在必須引用幾個表才幹獲得所需的資料時。在結果集中包括“合計”的常式通常要比使用遊標執行的速度快。

假設開發時 間同意，基於遊標的方法和基於集的方法都能夠嘗試一下。看哪一種方法的效果更好。

28、在全部的預存程序和觸發器的開始處設定 SET NOCOUNT ON ，在結束時設定 SET NOCOUNT OFF 。無需在執行預存程序和觸發器的每個語句後向client發送 DONE_IN_PROC 訊息。

29、盡量避免向client返回大資料量，若資料量過大，應該考慮對應需求是否合理。

30、盡量避免大事務操作。提高系統並發能力。

MySQL查詢最佳化