告警

2月5日晚上八點，我正吃完晚飯在洗完，突然聽到了群暉發(fā)出了嘟嘟嘟的告警聲，我靠近一看，有一個硬盤位亮了黃燈。

這個群暉是雙盤位的DS220+，我使用了兩個16TB的硬盤組成了raid1的存儲池，里面存儲了我多年來的照片，以及扇寶從出道至今的所有錄播，總占用空間大概是7TB。

無法登入管理界面

在確認是硬盤問題引起告警后，我第一時間打開群暉的WEB管理界面查看具體信息，然而，群暉的登入頁面打開異常，頁面錯誤顯示“系統(tǒng)正忙”：

疑點之一是這個頁面底部時間居然是2019年，我對這個錯誤產(chǎn)生了疑惑。因為顯示的是“資源不足”，我想到的第一個操作是重啟群暉，我長按群暉的電源按鈕，這會讓群暉進行軟重啟，然而事與愿違的是，群暉始終無反應。

令我疑惑的另外一個點是，群暉中運行的docker應用以及ftp和ssh服務均正常，在我ssh連接上群暉后，里面的文件也都在。

我通過開發(fā)者工具看到，群暉接口報告的錯誤信息并不是“系統(tǒng)正忙”，而是502狀態(tài)碼，狀態(tài)碼中包含了某個文件不存在的錯誤。這時候我意識到問題所在——群暉的系統(tǒng)文件損壞了。

我通過國內外的搜索引擎搜到了一些類似的案例，這些案例的解決方式是將群暉官網(wǎng)的最新安裝包解壓，然后將損壞的文件替換。然而群暉對近期的系統(tǒng)安裝包進行了加密，普通人無法進行解密。

我又了解到群暉有一個命令行工具可以更新系統(tǒng)，在我花費了好一番功夫把最新的系統(tǒng)安裝包上傳到群暉中后，群暉的更新系統(tǒng)命令直接報了500錯誤。原來群暉這貨的命令也是調用管理API實現(xiàn)的，在系統(tǒng)文件損壞的現(xiàn)在，管理API也無法使用了。

降級的存儲池

我直接將群暉斷電，拔下故障的硬盤2，然后重新接上電源，期望群暉能夠恢復正?！驗槲业拇鎯Τ厥莚aid1，少一個硬盤也沒什么大不了的。
然而，群暉啟動后，管理界面依然是相同的報錯。我迷糊了，難道群暉的硬盤故障搞錯了？我試著把拔掉的硬盤2插回去，然后拔下正常的硬盤1，繼續(xù)重啟，這時候群暉居然能夠正常登入了？！

這是什么情況？壞硬盤2是好的，好硬盤1反而是壞的！

登入系統(tǒng)后，存儲池處于損毀狀態(tài)，我在未斷電的情況下插上那塊“正常的硬盤1”，重建了存儲池，現(xiàn)在，存儲雖然是“已降級”的狀態(tài)，但我仍然能夠讀寫存儲池。

群暉提示，我需要把“故障的硬盤2”替換掉才能恢復整個存儲池。我又看了一下系統(tǒng)日志——硬盤2在故障時斷點連接了超過一千次，暫時不清楚故障原因。

損毀的存儲池

我以為群暉系統(tǒng)現(xiàn)在恢復正常了，我拔下“故障的硬盤2”，再進行重啟，群暉依然進不去系統(tǒng)，看來“正常的硬盤1”才是真正壞掉的那個。我繼續(xù)斷電，插上硬盤2，再重復上面的操作，但是這時候群暉告訴我，存儲池已經(jīng)損毀，并讓我求助于數(shù)據(jù)恢復公司。

我頓時傻眼了，我什么都沒干，就是拔插了一下硬盤，怎么整個存儲池壞掉了？我不甘心，繼續(xù)斷電重復上面的操作，這次在重建存儲池后，顯示存儲池處于只讀狀態(tài)，文件能夠正常讀取出來，我暫時放心了。

故障總結

1. 未知原因導致硬盤2掉盤是這次問題的直接原因

2. 群暉在硬盤2掉盤之后發(fā)生了系統(tǒng)文件損壞導致無法登入管理系統(tǒng)的情況

3. 只要拔插一下硬盤，這個盤就直接廢了，raid必須重建，對于雙盤位的raid0組的群暉，如果存儲池進入只讀狀態(tài)，除了再買一個塊盤來備份后重新初始化存儲池外，沒有任何辦法

我選購群暉的原因是這是一個較為專業(yè)的nas，對比自建nas有著開箱即用無需折騰的優(yōu)勢，并且我也不需要做后續(xù)的運維工作，然而這次故障之后，我發(fā)現(xiàn)群暉并不靠譜，相比自建nas以外沒有任何優(yōu)勢：

1. 我花了大量時間備份和恢復這7T的數(shù)據(jù)，并且群暉對我來說是一個黑箱，在群暉發(fā)生故障之后，我無法利用我多年的linux使用經(jīng)驗排查問題，我無從下手，這會讓我花費更多的時間。

2. 群暉的穩(wěn)定性令人堪憂，我自建的linux服務器能夠全年365天穩(wěn)定運行，然而群暉呢？至少在我這里，它做不到。這里僅指的是我個人的情況，因為你沒遇到那是你運氣好，我遇到了是因為我運氣差。我不想把數(shù)據(jù)交給這么一個不可控的東西來管理。

淺談nas的選擇

我的群暉系統(tǒng)炸了這肯定是一個小概率事件，但在我通過搜索引擎搜索的時候，發(fā)現(xiàn)這并不是發(fā)生在我一個人身上的事情，國外也有幾例和我的群暉完全相同癥狀的小伙伴。

在這次事件之后，我不再信任這些消費級的nas方案，比如群暉、威聯(lián)通這些，威聯(lián)通先不提，群暉是出了名的硬件配置差、性價比低 。

我現(xiàn)在有兩種選擇：

一種是usb接口的外界硬盤陣列盒，原本我看中了一款下了單，但想到，如果raid硬件損壞了，我的數(shù)據(jù)還能回來嗎？raid硬件可不是我一個程序員敲敲linux命令就能搞定的事情。所以我放棄了這種。

另外一種是自己給linux接幾個sata的大硬盤，通過軟raid，或者定時任務同步硬盤的方式來做，這相對靠譜一點，但門檻很高，不過對于我來說倒是不復雜，至少比群暉那個黑盒玩意兒要少花好多時間。

我在京東選購了一些硬件，計劃在周末將這套自建的存儲搭建起來。