標籤:raid重建 伺服器壞盤
2015年3月30日下午快下班時候同事從機房出來跟我說伺服器磁碟亮黃燈。
我走到機房看見有問題的伺服器dell r720前面板閃爍著:Fault detected on drive 0 in disk drive bay 1.中文意思大約是:在磁碟機托架1中磁碟0檢測到故障。
磁碟0 LED指示燈的確亮著黃燈,看樣情況不好很好。這台伺服器上跑著公司至關重要的erp資料庫,處理故障我需要格外小心。我決定今晚把問題處理掉,不希望問題會拖出其它問題。
在處理之前要做的一個非常關健的步驟就是對資料進行備份,當然個備份的目地是另外一台儲存。
備份完資料,到了下午6:20。通知公司同事,停掉伺服器業務關閉了伺服器。我沒有選擇線上操作,因為我擔心線上操作可能會出現磁碟瓶頸或磁碟讀寫壓力太大出現新的故障。
重啟伺服器進入陣列bios,發現前任工程師把伺服器共6塊盤做的是raid10。關閉伺服器,將有問題的盤拿出,準備將老檔案伺服器(已停用)磁碟櫃中熱備盤進行置換。
可拿出有問題的盤一看大驚,磁碟是sata類型,並不是伺服器磁碟sas。檢查一下r720其它磁碟都是sata。難怪伺服器才一周歲多就出現磁碟問題,原來不是專業的。
看來老伺服器的sas盤用不上了,要raid重建。磁碟的類型是必須是一樣。
同事找了半天沒有找到同類型的sata 2t磁碟,我告訴他將監控主機磁碟拆下一個來用。這個真不是好主義,可是沒有什麼好辦法。
將新的磁碟插進去以後,重新開機進入系統。從磁碟指示燈來看,磁碟並沒有進行raid重建。
我重啟了伺服器,進了陣列bios,將新插入的磁碟手工配置為熱備盤。此時系統自動將這塊盤rebuild,RAID重建中。我停掉所有主機服務狀態下進行rebuild,從大約8點開始至11點3個小時完成整個過程。
其實線上重建是允許的,可我總是小心翼翼。有句話這樣說:小心使的萬年船。
如果花點時間資料業務得到恢複,會得到同事說事。如果少花時間搞錯了資料,會得到老闆請去喝茶。
本文出自 “諶大集團” 部落格,請務必保留此出處http://52czy.blog.51cto.com/3704825/1626581
經曆dell R720 伺服器壞盤 raid 重建