理解LoadAverage做好壓力測試帖)

通過下面的幾個部分的瞭解，可以一步一步的找出Load Average在壓力測試中真正的作用。
　　CPU時間片
　　為了提高程式執行 效率，大家在很多應用中都採用了多線程模式，這樣可以將原來的序列化執行變為並存執行，任務的分解以及並存執行能夠極大地提高程式的運行效率。但這都是代 碼層級的表現，而硬體是如何支援的呢？那就要靠CPU的時間片模式來說明這一切。程式的任何指令的執行往往都會要競爭CPU這個最寶貴的資源，不論你的程 序分成了多少個線程去執行不同的任務，他們都必須排隊等待擷取這個資源來計算和處理命令。先看看單CPU的情況。
　　任何線程如果都排隊等待 CPU資源的擷取，那麼所謂的多線程就沒有任何實際意義。CPU Manager只是我虛擬一個角色，由它來分配和管理CPU的使用狀況，此時多線程將會在運行過程中都有機會得到CPU資源，也真正實現了在單CPU的 情況下實現同步多執行緒。
　　多CPU的情況只是單CPU的擴充，當所有的CPU都滿負荷運作的時候，就會對每一個CPU採用時間片的方式來提高效率。
　 　在Linux的核心處理過程中，每一個進程預設會有一個固定的時間片來執行命令（預設為1/100秒），這段時間內進程被分配到CPU，然後獨佔使用。 如果使用完，同時未到時間片的規定時間，那麼就主動放棄CPU的佔用，如果到時間片尚未完成工作，那麼CPU的使用權也會被收回，進程將會被中斷掛起等待 下一個時間片。
　　CPU利用率和Load Average的區別
　　壓力測試不僅需要對業務情境的並發使用者等壓力參數作類比，同時也需 要在壓力測試過程中隨時關注機器的效能情況，來確保壓力測試的有效性。當伺服器長期處於一種超負荷的情況下運行，所能接收的壓力並不是我們所認為的可接受 的壓力。就好比專案經理在給一個人估工作量的時候，每天都讓這個人工作12個小時，那麼所制定的專案計劃就不是一個合理的計劃，那個人遲早會垮掉，而影響 整體的項目進度。
　　CPU利用率在過去常常被我們這些外行認為是判斷機器是否已經到了滿負荷的一個標準，看到50%-60%的使用率就認為機器 就已經壓到了臨界了。CPU利用率，顧名思義就是對於CPU的使用狀況，這是對一個時間段內CPU使用狀況的統計，通過這個指標可以看出在某一個時間段內 CPU被佔用的情況，如果被佔用時間很高，那麼就需要考慮CPU是否已經處於超負荷運作，長期超負荷運作對於機器本身來說是一種損害，因此必須將CPU的 利用率控制在一定的比例下，以保證機器的正常運作。
　　Load Average是CPU的Load，它所包含的資訊不是CPU的使用率狀況，而是在一段時間內CPU正在處理以及等待CPU處理的進程數之和的統計資訊， 也就是CPU使用隊列的長度的統計資訊。為什麼要統計這個資訊，這個資訊的對於壓力測試的影響究竟是怎麼樣的，那就通過一個類比來解釋CPU利用率和 Load Average的區別以及對於壓力測試的指導意義。
　　我們將CPU就類比為電話亭，每一個進程都是一個需要打電話的人。現在一共有4 個電話亭（就好比我們的機器有4核），有10個人需要打電話。現在使用電話的規則是管理員會按照順序給每一個人輪流分配1分鐘的使用電話時間，如果使用者 在1分鐘內使用完畢，那麼可以立刻將電話使用權返還給管理員，如果到了1分鐘電話使用者還沒有使用完畢，那麼需要重新排隊，等待再次分配使用。
　　對於使用電話的使用者又作了一次分類，1min的代表這些使用者佔用電話時間小於等於1min，2min表示使用者佔用電話時間小於等於2min，以此類推。根據電話使用規則，1min的使用者只需要得到一次分配即可完成通話，而其他兩類使用者需要排隊兩次到三次。
　　電話的利用率 = sum (active use cpu time)/period
　 　每一個分配到電話的使用者使用電話時間的總和去除以統計的時間段。這裡需要注意的是是使用電話的時間總和(sum(active use cpu time))，這與佔用時間的總和(sum(occupy cpu time))是有區別的。（例如一個使用者得到了一分鐘的使用權，在10秒鐘內打了電話，然後去查詢號碼本花了20秒鐘，再用剩下的30秒打了另一個電話， 那麼佔用了電話1分鐘，實際只是使用了40秒）
　　電話的Average Load體現的是在某一統計時間段內，所有使用電話的人加上等待電話分配的人一個平均統計。
　 　電話利用率的統計能夠反映的是電話被使用的情況，當電話長期處於被使用而沒有的到足夠的時間休息間歇，那麼對於電話硬體來說是一種超負荷的運作，需要調 整使用頻度。而電話Average Load卻從另一個角度來展現對於電話使用狀態的描述，Average Load越高說明對於電話資源的競爭越激烈，電話資源比較短缺。對於資源的申請和維護其實也是需要很大的成本，所以在這種高Average Load的情況下電話資源的長期“熱競爭”也是對於硬體的一種損害。
　　低利用率的情況下是否會有高Load Average的情況產生呢？理解佔有時間和使用時間就可以知道，當分配時間片以後，是否使用完全取決於使用者，因此完全可能出現低利用率高Load Average的情況。由此來看，僅僅從CPU的使用率來判斷CPU是否處於一種超負荷的工作狀態還是不夠的，必須結合Load Average來全域的看CPU的使用方式和申請情況。
　　所以回過頭來再看測試部對於Load Average的要求，在我們機器為8個CPU的情況下，控制在10 Load左右，也就是每一個CPU正在處理一個請求，同時還有2個在等待處理。看了看網上很多人的介紹一般來說Load簡單的計算就是2* CPU個數減去1-2左右（這個只是網上看來的，未必是一個標準）。
　　補充幾點：
　　1．對於CPU利用率和CPU Load Average的結果來判斷效能問題。首先低CPU利用率不表明CPU不是瓶頸，競爭CPU的隊列長期保持較長也是CPU超負荷的一種表現。對於應用來說 可能會去花時間在I/O,Socket等方面，那麼可以考慮是否後這些硬體的速度影響了整體的效率。
　　這裡最好的樣板範例就是我在測試中發現的 一個現象：SIP當前在處理過程中，為了提高處理效率，將控制策略以及計數資訊都放置在Memcached Cache裡面，當我將Memcached Cache配置擴容一倍以後，CPU的利用率以及Load都有所下降，其實也就是在處理任務的過程中，等待Socket的返回對於CPU的競爭也產生了影 響。
　　2．未來多CPU編程的重要性。現在伺服器的CPU都是多CPU了，我們的伺服器處理能力已經不再按照摩爾定律來發展。就我上面提到的電 話亭情境來看，對於三種不同時間需求的使用者來說，採用不同的分配順序，我們可看到的Load Average就會有不同。假設我們統計Load的時間段為2分鐘，如果將電話分配的順序按照：1min的使用者，2min的使用者，3min的使用者來分配， 那麼我們的Load Average將會最低，採用其他順序將會有不同的結果。所以未來的多CPU編程可以更好的提高CPU的利用率，讓程式跑的更快。
　　以上所提到的內容未必都是很準確或者正確，如果有任何的偏差也請大家指出，可以糾正一些不清楚的概念。