[Linux] 假死分析

來源:互聯網
上載者:User

所謂假死,就是能ping通,但是ssh不上去;任何其他動作也都沒反應,包括上面部署的apache也打不開頁面。

作為一個多任務作業系統,要把系統忙死,忙到ssh都連不上去,也不是那麼容易的。尤其是現在還有fd保護、進程數保護、最大記憶體保護之類的機制。你可以fork很多進程,系統會變得很慢,但是ssh還是能連上去;你可以分配很多記憶體,但是記憶體多到一定程度oom killer就會把你的進程殺掉,於是ssh又能工作了。

有一個確定可以把系統搞成假死的辦法是:主進程分配500MB記憶體,然後不停的fork,並且在子進程裡面sleep(100)。

這是什麼原理?這是swap、copy on write、allocate on write、oom killer一起作用的結果。當主進程不停fork的時候,很快會把系統的實體記憶體用完,然後開始swap;在swap的時候觸發了fork的copy on write屬性;此時會需要分配真正的記憶體給之前copy on write的子進程,由於記憶體不足,這將觸發oom killer開始殺進程;當oom killer殺掉了子進程,主進程立刻又fork了新的子進程,並再次導致記憶體用完,再次觸發oom killer;於是死迴圈,而且oom killer是系統底層優先順序很高的核心線程,也在參與死迴圈。

此時機器可以ping通,但是無法ssh上去。這是由於ping是在系統底層處理的,沒有參與進程調度;sshd要參與進程調度,但是優先順序沒oom killer高,總得不到調度。

為什麼要費那麼大的力氣把機器搞死?因為所有人都會遇到機器假死的情況。知道假死是怎麼產生的,就可以針對假死的原因進行預防。

參見:

http://en.wikipedia.org/wiki/Out_of_memory

http://lwn.net/Articles/317814/

下面給出一個查看所有進程oom_socore的指令碼:

echo startfor dir in `ls /proc` do   if [ -d /proc/$dir ]   then    if [ -f /proc/$dir/oom_score ]    then      cat /proc/$dir/cmdline      printf '\n'          cat /proc/$dir/oom_score    fi   fidone echo done

另外,通過cgroup之類的手段應該是可以控制oom killer的行為的。

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.