所謂假死,就是能ping通,但是ssh不上去;任何其他動作也都沒反應,包括上面部署的apache也打不開頁面。
作為一個多任務作業系統,要把系統忙死,忙到ssh都連不上去,也不是那麼容易的。尤其是現在還有fd保護、進程數保護、最大記憶體保護之類的機制。你可以fork很多進程,系統會變得很慢,但是ssh還是能連上去;你可以分配很多記憶體,但是記憶體多到一定程度oom killer就會把你的進程殺掉,於是ssh又能工作了。
有一個確定可以把系統搞成假死的辦法是:主進程分配500MB記憶體,然後不停的fork,並且在子進程裡面sleep(100)。
這是什麼原理?這是swap、copy on write、allocate on write、oom killer一起作用的結果。當主進程不停fork的時候,很快會把系統的實體記憶體用完,然後開始swap;在swap的時候觸發了fork的copy on write屬性;此時會需要分配真正的記憶體給之前copy on write的子進程,由於記憶體不足,這將觸發oom killer開始殺進程;當oom killer殺掉了子進程,主進程立刻又fork了新的子進程,並再次導致記憶體用完,再次觸發oom killer;於是死迴圈,而且oom killer是系統底層優先順序很高的核心線程,也在參與死迴圈。
此時機器可以ping通,但是無法ssh上去。這是由於ping是在系統底層處理的,沒有參與進程調度;sshd要參與進程調度,但是優先順序沒oom killer高,總得不到調度。
為什麼要費那麼大的力氣把機器搞死?因為所有人都會遇到機器假死的情況。知道假死是怎麼產生的,就可以針對假死的原因進行預防。
參見:
http://en.wikipedia.org/wiki/Out_of_memory
http://lwn.net/Articles/317814/
下面給出一個查看所有進程oom_socore的指令碼:
echo startfor dir in `ls /proc` do if [ -d /proc/$dir ] then if [ -f /proc/$dir/oom_score ] then cat /proc/$dir/cmdline printf '\n' cat /proc/$dir/oom_score fi fidone echo done
另外,通過cgroup之類的手段應該是可以控制oom killer的行為的。