Mysql order by與limit混用陷阱

標籤：cimage   order   alt   依賴   span   添加   表結構   陷阱   問題   

在Mysql中我們常常用order by來進行排序，使用limit來進行分頁，當需要先排序後分頁時我們往往使用類似的寫法select * from 表名 order by 排序欄位 limt M,N。但是這種寫法卻隱藏著較深的使用陷阱。在排序欄位有資料重複的情況下，會很容易出現排序結果與預期不一致的問題。

比如現在有一張user表，表結構及資料如下：

表結構
表資料

現在想根據建立時間升序查詢user表，並且分頁查詢，每頁2條，那很容易寫出sql為：select * from user order by create_time limit pageNo,2;

在執行查詢過程中會發現：
1、查詢第一頁資料時：

第一頁查詢結果

2、查詢第四頁資料時：

第四頁查詢結果

user表共有8條資料，有4頁資料，但是實際查詢過程中第一頁與第四頁竟然出現了相同的資料。

這是什麼情況？難道上面的分頁SQL不是先將兩個表關聯查詢出來，然後再排好序，再取對應分頁的資料嗎？？？

上面的實際執行結果已經證明現實與想像往往是有差距的，實際SQL執行時並不是按照上述方式執行的。這裡其實是Mysql會對Limit做最佳化，具體最佳化方式見官方文檔：https://dev.mysql.com/doc/refman/5.7/en/limit-optimization.html
這個是5.7版本的說明，提取幾個問題直接相關的點做下說明。

Paste_Image.png

上面官方文檔裡面有提到如果你將Limit row_count與order by混用，mysql會找到排序的row_count行後立馬返回，而不是排序整個查詢結果再返回。如果是通過索引排序，會非常快；如果是檔案排序，所有匹配查詢的行（不帶Limit的）都會被選中，被選中的大多數或者全部會被排序，直到limit要求的row_count被找到了。如果limit要求的row_count行一旦被找到，Mysql就不會排序結果集中剩餘的行了。

這裡我們查看下對應SQL的執行計畫：

Paste_Image.png

可以確認是用的檔案排序，表確實也沒有加額外的索引。所以我們可以確定這個SQL執行時是會找到limit要求的行後立馬返回查詢結果的。

不過就算它立馬返回，為什麼分頁會不準呢？

官方文檔裡面做了如下說明：

Paste_Image.png

如果order by的欄位有多個行都有相同的值，mysql是會隨機的順序返回查詢結果的，具體依賴對應的執行計畫。也就是說如果排序的列是無序的，那麼排序的結果行的順序也是不確定的。

基於這個我們就基本知道為什麼分頁會不準了，因為我們排序的欄位是create_time，正好又有幾個相同的值的行，在實際執行時返回結果對應的行的順序是不確定的。對應上面的情況，第一頁返回的name為8的資料行，可能正好排在前面，而第四頁查詢時name為8的資料行正好排在後面，所以第四頁又出現了。

那這種情況應該怎麼解決呢？

官方給出瞭解決方案：

Paste_Image.png

如果想在Limit存在或不存在的情況下，都保證排序結果相同，可以額外加一個排序條件。例如id欄位是唯一的，可以考慮在排序欄位中額外加個id排序去確保順序穩定。

所以上面的情況下可以在SQL再添加個排序欄位，比如fund_flow的id欄位，這樣分頁的問題就解決了。修改後的SQL可以像下面這樣：
SELECT * FROM user ORDER BY create_time,id LIMIT 6,2;

再次測試問題解決！！

Mysql order by與limit混用陷阱