MapReduce中的cpu sys突然升到的抖動問題

最近在測試過程中，發現在做map reduce資料分析的過程中，cpu sys部分會偶然的升到，甚至到達50%，抖動的比較厲害。

節點的磁碟的IO輸送量比較大，每秒達到150M，大部分是tasktracker讀取本地節點DFS的資料，預設情況下，讀取資料是系統調用每次從硬碟上讀取4K大小的資料到核心空間中，後由核心copy到應用程式空間，是什麼導致核心部分消耗大部分的時間。

經過大量的各方面的監控，發現CPU sys突然升到的時機大部分發生在檔案系統cache釋放記憶體的時，非常既有規律性，特別是在作業系統的可用記憶體比較緊張時特別明顯，

因此推斷是檔案系統cache釋放部分空間時候需要核心做複雜的收集演算法，把一些不常用的頁面交換到硬碟上，又因MapReduce的過程是大量的順序IO，因此對檔案系統的cache消耗的特別厲害，cache的空間釋放也比較頻繁。後把vm的cache drop的情況下，mapreduce運算過程中，cache一直在增加無cache交換方式，CPU sys消耗很小並且穩定，進一步的驗證了這個問題。

後續對檔案系統cache部分進行最佳化。