故障描述

用戶操作系統(tǒng)Asianux Linux(3.10.0-957.axs7.x86_64)，近期收到監(jiān)控日志報警，系統(tǒng)運行正常。Messages多次報錯日志如下：

故障分析

1．查看報錯日志與硬盤disk相關(guān)，收集raid卡日志進(jìn)行分析，raid卡日志中對應(yīng)的PD 08硬盤有多次預(yù)失效的告警。

2．通過日志中報錯的磁盤位置PD 08(e0x00/s15)，查看對應(yīng)的raid卡配置信息，確認(rèn)DID（Device ID）,EID(Enclosure Device ID)和slot信息，定位故障硬盤位置：c0/e0/s15，slot15硬盤為raid6中成員。

3．查看raid卡日志中c0/e0/s15硬盤詳細(xì)信息，Media Error Count數(shù)值已經(jīng)達(dá)到35，表示磁盤可能錯誤，或者是磁盤有壞道，這個值不為0時需要注意，數(shù)值越大，危險系數(shù)越高。Other Error Count的值一般為0，這里也達(dá)到了3，說明硬盤已經(jīng)出現(xiàn)過多次問題，為了預(yù)防硬盤后續(xù)情況惡化，建議更換掉預(yù)失效的硬盤。

故障處理

1.機(jī)器配置raid型號為LSI SAS2208，系統(tǒng)中安裝對應(yīng)raid管理軟件storcli.

2.從raid中把故障硬盤踢出：命令：#./storcli64 /c0/e0/s15 set offline.

3.命令執(zhí)行成功后硬盤狀態(tài)變?yōu)閛ffline,可以更換硬盤，待硬盤數(shù)據(jù)同步完成后，日志再無報錯出現(xiàn)。?

經(jīng)驗總結(jié)

現(xiàn)在，服務(wù)器硬盤配置數(shù)量較多，預(yù)告警的報錯也會相對較多。所以，在收集日志中我們一定要收集全面，特別是raid卡相關(guān)日志，它對硬盤故障的定位起著很大的作用。華為服務(wù)器操作系統(tǒng)日志收集官方給出對應(yīng)的腳本，InfoCollect_Windows和InfoCollect_linux.tar，還是建議使用官方推薦版本去收集日志會比較全面。