服務(wù)器數(shù)據(jù)恢復(fù)環(huán)境&故障：
一臺(tái)服務(wù)器上有8塊SAS硬盤，其中的7塊硬盤組建了一組RAID5陣列，另外1塊硬盤作為熱備盤使用。劃分了6個(gè)LUN，服務(wù)器上部署有oracle數(shù)據(jù)庫。
RAID5磁盤陣列中有2塊硬盤出現(xiàn)故障并離線，RAID5陣列癱瘓，上層LUN無法正常使用。經(jīng)過硬件工程師檢測，所有硬盤（包括離線的2塊盤）均無物理故障以及壞道。

服務(wù)器數(shù)據(jù)恢復(fù)過程：
1、將服務(wù)器中所有磁盤編號(hào)標(biāo)記后取出，以只讀方式將所有磁盤進(jìn)行扇區(qū)級(jí)全盤鏡像。鏡像完成后將所有磁盤按照編號(hào)還原到原服務(wù)器中，后續(xù)的數(shù)據(jù)分析和數(shù)據(jù)恢復(fù)操作都基于鏡像文件進(jìn)行，避免對(duì)原始磁盤數(shù)據(jù)造成二次破壞。

2、基于鏡像文件分析所有磁盤的底層數(shù)據(jù)。通過分析獲取到raid相關(guān)信息（條帶大小，磁盤順序及數(shù)據(jù)走向等），依據(jù)這些信息虛擬重組原RAID5陣列。
3、仔細(xì)分析每一塊硬盤中的數(shù)據(jù)，通過北亞企安自主開發(fā)的RAID校驗(yàn)程序做校驗(yàn)，將先掉線的硬盤剔除出raid。
4、服務(wù)器中的的LUN都是基于RAID的，分析LUN在RAID5陣列中的分配情況，以及LUN分配的數(shù)據(jù)塊MAP。
5、將每一個(gè)LUN的數(shù)據(jù)塊分布MAP提取出來。北亞企安數(shù)據(jù)恢復(fù)工程師針對(duì)這些信息編寫相應(yīng)的程序，解析所有LUN的數(shù)據(jù)MAP，然后根據(jù)數(shù)據(jù)MAP導(dǎo)出所有LUN的數(shù)據(jù)。

6、分析所有導(dǎo)出的LUN，發(fā)現(xiàn)所有LUN中均包含HP-Unix的LVM邏輯卷信息。嘗試解析每個(gè)LUN中的LVM信息，發(fā)現(xiàn)其中一共有三套LVM：其中一個(gè)LVM中劃分了一個(gè)LV，存放OA服務(wù)器端的數(shù)據(jù)；第二個(gè)LVM中也劃分了一個(gè)LV，存放臨時(shí)備份數(shù)據(jù)；第三個(gè)LVM由剩余4個(gè)LUN組成，劃分了一個(gè)LV，存放Oracle數(shù)據(jù)庫文件。北亞企安數(shù)據(jù)恢復(fù)工程師編寫LVM解釋程序，嘗試將每個(gè)LVM中的LV都解釋出來，但解釋過程中程序報(bào)錯(cuò)。
7、分析程序報(bào)錯(cuò)的原因，并讓開發(fā)工程師debug程序出錯(cuò)的位置，同時(shí)安排文件系統(tǒng)工程師檢測所有恢復(fù)出來的LUN，檢測是否會(huì)因?yàn)榇鎯?chǔ)癱瘓而導(dǎo)致LMV邏輯卷的信息損壞。經(jīng)過檢測，發(fā)現(xiàn)存儲(chǔ)癱瘓確實(shí)導(dǎo)致LVM信息損壞。嘗試人工修復(fù)損壞的區(qū)域，并同步修改程序，重新解析LVM邏輯卷。
8、搭建HP-Unix環(huán)境，將解釋出來的LV卷映射到HP-Unix，并嘗試Mount文件系統(tǒng)，結(jié)果Mount文件系統(tǒng)出錯(cuò)。嘗試使用“fsck –F vxfs” 命令修復(fù)vxfs文件系統(tǒng)，修復(fù)完成后還是不能掛載。懷疑底層vxfs文件系統(tǒng)的部分元數(shù)據(jù)可能被破壞。
9、分析解析出來的LV，并根據(jù)VXFS文件系統(tǒng)的底層結(jié)構(gòu)校驗(yàn)此文件系統(tǒng)的完整性。經(jīng)過分析發(fā)現(xiàn)底層VXFS文件系統(tǒng)確實(shí)有問題，原來當(dāng)存儲(chǔ)癱瘓的同時(shí)此文件系統(tǒng)正在執(zhí)行IO操作，因此導(dǎo)致部分文件系統(tǒng)元文件損壞。手工修復(fù)這些損壞的元文件，直到VXFS文件系統(tǒng)能夠正常解析。將修復(fù)好的LV掛載到HP-Unix小機(jī)上，嘗試Mount文件系統(tǒng)，這回文件系統(tǒng)沒有報(bào)錯(cuò)，成功掛載。
10、在HP-Unix機(jī)器上mount文件系統(tǒng)后，將所有用戶數(shù)據(jù)均備份至指定磁盤空間。
部分文件目錄截圖：

11、使用Oracle數(shù)據(jù)庫文件檢測工具“dbv”檢測每個(gè)數(shù)據(jù)庫文件的完整性，沒有發(fā)現(xiàn)錯(cuò)誤。使用北亞企安自主研發(fā)的Oracle數(shù)據(jù)庫檢測工具進(jìn)行檢測，發(fā)現(xiàn)部分?jǐn)?shù)據(jù)庫文件和日志文件校驗(yàn)不一致。安排數(shù)據(jù)庫工程師修復(fù)此類文件后再次校驗(yàn)，直到所有文件校驗(yàn)均完全通過。
12、將恢復(fù)出來的Oracle數(shù)據(jù)庫附加到原始生產(chǎn)環(huán)境的HP-Unix服務(wù)器中，嘗試啟動(dòng)Oracle數(shù)據(jù)庫，Oracle數(shù)據(jù)庫啟動(dòng)成功。

13、由用戶方配合，啟動(dòng)Oracle數(shù)據(jù)庫和OA服務(wù)端，在本地安裝OA客戶端。通過OA客戶端對(duì)最新的數(shù)據(jù)記錄以及歷史數(shù)據(jù)記錄進(jìn)行驗(yàn)證，并且安排用戶方單位不同部門人員進(jìn)行遠(yuǎn)程驗(yàn)證。經(jīng)過多方面驗(yàn)證，確認(rèn)數(shù)據(jù)完整無誤。數(shù)據(jù)恢復(fù)工作完成。

審核編輯 黃宇