針對linux IO效能的調優可以從以下幾個方面考慮:
1.塊裝置的預讀粒度,根據讀、寫操作的粒度來確定此數值的大小
2.塊裝置的調度演算法,主要有cfq、deadline、Anticipatory、noop四種;
其中:
noop不對請求做出特定的排序,只做IO請求的彙總,適合ssd、ramdisk等不需要磁頭定址的裝置
cfq(complete fair queueing),根據磁碟扇區號排序,減少磁碟尋道時間,實現了IO彙總,它的特點是對所有請求進程保證完全的公平,也就是在一個特定的時間內,保證每個進程的請求數量一樣多
deadline根據硬碟扇區號進行讀寫的排序,並為請求設定期限,防止這些請求在一段時間內得不到調度
anticipatory識別請求的進程號,能夠利用請求的局部性特點,適合順序讀寫情境
總結:noop應用在ssd裝置上;cfq、deadline應用在零散io請求,比如資料庫;anticipatory應用在順序io讀寫的情境
3.利用posix_fadvise對應用程式的讀寫進行最佳化,主要用到willneed方式將檔案內容讀到page cache,dontneed將檔案的page cache清空,sequntial將檔案的預取視窗放大2倍
4.使用taskset將進程與cpu核綁定
5.利用iostat、sar,來分析從硬碟上讀取的資料與網卡發送的資料流量是否一致
6.對小寫、小讀比如mysql資料庫應用,使用ssd來儲存
7.盡量加大實體記憶體,並且禁用swap分區
8.應用程式盡量避免線程泛濫,盡量採用線程池化或者單線程多任務
9.保證應用正確的前提下,減小鎖的粒度
10.採用TOE、RDMA網卡
11.使用零拷貝sendfile發送socket檔案
12.使用非同步、非阻塞方式傳送檔案
13.使用AIO
14.對RAID的chunk進行調優、檔案系統的block參數進行調優,針對讀取粒度選擇合適的chunk和block參數
15.均中斷