V7000存儲(chǔ)故障概況：
本次故障設(shè)備架構(gòu)為P740小機(jī)+AIX操作系統(tǒng)+Sybase數(shù)據(jù)庫+V7000存儲(chǔ)陣列柜，核心業(yè)務(wù)數(shù)據(jù)全部存儲(chǔ)于V7000陣列柜內(nèi)。
該存儲(chǔ)搭載12塊SAS機(jī)械硬盤，陣列內(nèi)配置一塊專屬熱備盤。
某日凌晨5時(shí)許，設(shè)備突發(fā)磁盤硬件故障，運(yùn)維人員更換故障硬盤啟動(dòng)陣列數(shù)據(jù)同步，同步進(jìn)度進(jìn)行至40%左右時(shí)，陣列內(nèi)另一塊硬盤突發(fā)故障離線。
雙盤離線直接造成存儲(chǔ)邏輯盤無法掛載至P740小機(jī)，企業(yè)核心業(yè)務(wù)全面中斷。登錄存儲(chǔ)管理界面核查可知，兩塊硬盤均處于脫機(jī)故障狀態(tài)，其中10號(hào)槽位故障盤為熱備盤，3號(hào)槽位硬盤存在嚴(yán)重硬件異常。
客戶在陣列柜內(nèi)劃分兩組Mdisk，并統(tǒng)一納入同一存儲(chǔ)存儲(chǔ)池Pool管理；故障發(fā)生后，承載核心業(yè)務(wù)數(shù)據(jù)的主Pool無法正常加載，池內(nèi)三個(gè)通用業(yè)務(wù)卷全部掛載失敗，業(yè)務(wù)數(shù)據(jù)徹底無法訪問。

V7000存儲(chǔ)數(shù)據(jù)恢復(fù)過程：
1、為規(guī)避恢復(fù)操作失誤、硬盤二次損壞帶來的數(shù)據(jù)二次丟失風(fēng)險(xiǎn)，本次恢復(fù)嚴(yán)格遵循只讀操作、鏡像取證原則，全程基于鏡像盤開展恢復(fù)工作，絕不直接操作原始故障磁盤。
本次鏡像工作分區(qū)開展：使用Winhex工具完成10塊狀態(tài)正常硬盤的全盤鏡像制作；3號(hào)槽位故障硬盤存在大量壞道，讀取穩(wěn)定性極差，采用專業(yè)硬件設(shè)備PC3000完成壞道盤鏡像提取，最大程度保全原始數(shù)據(jù)。
2、結(jié)合本次V7000存儲(chǔ)的故障特征，定制兩套適配的恢復(fù)方案，按難易程度依次嘗試開展修復(fù)：
方案一：故障硬盤修復(fù)+陣列強(qiáng)制上線
梳理存儲(chǔ)底層日志，精準(zhǔn)甄別兩塊故障硬盤的離線先后順序；
對(duì)后離線的故障硬盤開展硬件物理修復(fù)，完成全盤鏡像校驗(yàn)；
將修復(fù)完成的硬盤歸位原槽位，執(zhí)行陣列強(qiáng)制上線操作，嘗試直接恢復(fù)陣列可用性。
方案二：底層存儲(chǔ)結(jié)構(gòu)解析與陣列重組
若強(qiáng)制上線方案嘗試失敗，將啟用深度底層解析重組方案，逐層拆解存儲(chǔ)架構(gòu)完成數(shù)據(jù)提取。
3、數(shù)據(jù)恢復(fù)方案實(shí)施過程：
Mdisk分析與虛擬重組
根據(jù)客戶提供的存儲(chǔ)原始配置信息，北亞數(shù)據(jù)恢復(fù)工程師對(duì)所有磁盤進(jìn)行Mdisk組別分類；逐一解析各組Mdisk內(nèi)磁盤參數(shù)，梳理RAID陣列層級(jí)相關(guān)信息；借助專業(yè)恢復(fù)工具完成Mdisk虛擬重組搭建。
存儲(chǔ)Pool結(jié)構(gòu)解析
對(duì)重組后的所有Mdisk開展深度分析，梳理Pool架構(gòu)核心配置參數(shù)；精準(zhǔn)解析Pool數(shù)據(jù)在多組Mdisk中的分布規(guī)則與存儲(chǔ)排布邏輯。
LUN結(jié)構(gòu)解析與數(shù)據(jù)提取
核算Pool內(nèi)部數(shù)據(jù)條帶大??；解析LUN位圖信息，明確各個(gè)業(yè)務(wù)卷在Pool內(nèi)的數(shù)據(jù)分布位置；北亞數(shù)據(jù)恢復(fù)工程師自研專屬提取程序，完成完整LUN數(shù)據(jù)的剝離與導(dǎo)出。
陣列掉盤故障原因分析
RAID5陣列本身僅支持單盤離線容錯(cuò)，單塊硬盤故障時(shí)陣列仍可維持正常讀寫運(yùn)行，一旦出現(xiàn)雙盤同時(shí)離線，陣列架構(gòu)便會(huì)直接崩潰癱瘓。
本次客戶存儲(chǔ)陣列失效的核心誘因，正是RAID5陣列觸發(fā)雙盤離線故障；北亞數(shù)據(jù)恢復(fù)工程師提取V7000設(shè)備系統(tǒng)日志進(jìn)行深度研判，精準(zhǔn)鎖定兩塊故障硬盤的具體離線時(shí)間與離線先后順序，為后續(xù)恢復(fù)方案制定提供了關(guān)鍵依據(jù)。
4、恢復(fù)數(shù)據(jù)完整性校驗(yàn)
全部LUN數(shù)據(jù)提取完成后，北亞數(shù)據(jù)恢復(fù)工程師對(duì)導(dǎo)出的業(yè)務(wù)數(shù)據(jù)開展多維度隨機(jī)抽樣核驗(yàn)，逐一校驗(yàn)文件完整性、數(shù)據(jù)庫可用性、數(shù)據(jù)時(shí)序一致性，經(jīng)檢測(cè)所有恢復(fù)數(shù)據(jù)均完整可用，無損壞、缺失、亂碼等異常問題。
5、數(shù)據(jù)合規(guī)移交部署
數(shù)據(jù)核驗(yàn)無誤后開展數(shù)據(jù)回遷移交工作：由客戶提供全新正常的V7000存儲(chǔ)設(shè)備，北亞數(shù)據(jù)恢復(fù)工程師參照原業(yè)務(wù)環(huán)境配置，創(chuàng)建規(guī)格、數(shù)量、容量完全一致的LUN業(yè)務(wù)卷；通過dd命令，將導(dǎo)出的LUN鏡像數(shù)據(jù)完整拷貝至全新存儲(chǔ)LUN中，完成數(shù)據(jù)回遷后正式向客戶交付設(shè)備與數(shù)據(jù)。

V7000存儲(chǔ)數(shù)據(jù)恢復(fù)結(jié)果：
客戶接收回遷數(shù)據(jù)后，自主完成AIX系統(tǒng)、Sybase數(shù)據(jù)庫及整體業(yè)務(wù)架構(gòu)的調(diào)試配置，掛載存儲(chǔ)LUN后所有業(yè)務(wù)數(shù)據(jù)均可正常訪問，數(shù)據(jù)庫運(yùn)行穩(wěn)定、業(yè)務(wù)系統(tǒng)順利恢復(fù)上線。
本次V7000存儲(chǔ)雙盤離線數(shù)據(jù)恢復(fù)工作全程順利，核心業(yè)務(wù)數(shù)據(jù)100%完整恢復(fù)，故障搶修任務(wù)圓滿收官。

審核編輯 黃宇