Linux IO調優的幾點考慮

來源:互聯網
上載者:User

針對linux IO效能的調優可以從以下幾個方面考慮:

1.塊裝置的預讀粒度,根據讀、寫操作的粒度來確定此數值的大小

2.塊裝置的調度演算法,主要有cfq、deadline、Anticipatory、noop四種;

其中:

noop不對請求做出特定的排序,只做IO請求的彙總,適合ssd、ramdisk等不需要磁頭定址的裝置

cfq(complete fair queueing),根據磁碟扇區號排序,減少磁碟尋道時間,實現了IO彙總,它的特點是對所有請求進程保證完全的公平,也就是在一個特定的時間內,保證每個進程的請求數量一樣多

deadline根據硬碟扇區號進行讀寫的排序,並為請求設定期限,防止這些請求在一段時間內得不到調度

anticipatory識別請求的進程號,能夠利用請求的局部性特點,適合順序讀寫情境

總結:noop應用在ssd裝置上;cfq、deadline應用在零散io請求,比如資料庫;anticipatory應用在順序io讀寫的情境

3.利用posix_fadvise對應用程式的讀寫進行最佳化,主要用到willneed方式將檔案內容讀到page cache,dontneed將檔案的page cache清空,sequntial將檔案的預取視窗放大2倍

4.使用taskset將進程與cpu核綁定

5.利用iostat、sar,來分析從硬碟上讀取的資料與網卡發送的資料流量是否一致

6.對小寫、小讀比如mysql資料庫應用,使用ssd來儲存

7.盡量加大實體記憶體,並且禁用swap分區

8.應用程式盡量避免線程泛濫,盡量採用線程池化或者單線程多任務

9.保證應用正確的前提下,減小鎖的粒度

10.採用TOE、RDMA網卡

11.使用零拷貝sendfile發送socket檔案

12.使用非同步、非阻塞方式傳送檔案

13.使用AIO

14.對RAID的chunk進行調優、檔案系統的block參數進行調優,針對讀取粒度選擇合適的chunk和block參數

15.均中斷

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.