應對IBM V7000磁盤故障，你只差這一步！

一、IBM V7000簡要：

1. 第一個IBM自主研發的中端存儲2.0產品，架構上突破傳統，吸收了DS和IBM橫向擴展架構XIV的精華。
2. 第一次集“EasyTier自動分層”“虛擬化”“精簡調配”三大存儲效率于一身的磁盤陣列，使IBM Storwize V7000當之無愧的成為更加看重存儲效率的中端存儲市場上的殺手級產品。
3. 第一次把DS8000的RAID技術和自動分層、SVC虛擬化架構以及XIV的賞心悅目的管理界面等高端存儲上的技術用在中端存儲上，擁有企業級陣列的功能和使人眼前一亮的GUI。
   二、故障描述
   客戶設備型號為IBM V7000存儲，架構為AIX+Sybase+V7000存儲陣列柜，需要恢復的數據主要存放在陣列柜上，共12塊600G容量的SAS機械硬盤（其中一塊為熱備盤）。

由于IBM V7000磁盤故障，在更換磁盤數據同步的時候，另一個磁盤也出現了問題，導致邏輯盤無法掛接在小型機上，業務暫時中斷。從存儲管理界面查看，兩塊硬盤顯示故障脫機，其中10號槽位故障硬盤為熱備盤，3號槽位故障硬盤情況如下圖所示：


客戶的陣列柜中共創建了2組Mdisk，加到一個pool中，現客戶主要數據pool無法加載，其中共三個通用卷均無法掛載，具體情況如下圖所示：

三、鏡像磁盤
為防止數據恢復過程中由于誤操作對原始磁盤造成二次破壞, 使用winhex軟件為其中的10塊磁盤做鏡像, 用PC3000給3號槽位的故障硬盤做鏡像（可能有較多壞道）， 以后所有的數據恢復操作都在鏡像盤上進行, 不會對原始磁盤造成影響。

**四、恢復流程

恢復方案一、對存儲進行強制上線操作**

1、 分析故障存儲中，故障硬盤的離線順序。

2、 修復后離線的故障硬盤。

3、 將修復的硬盤插回存儲，進行強制上線操作。

恢復方案二、解析存儲結構

1、Mdisk分析及重組

A、根據客戶給出的部分配置信息，將硬盤按照Mdisk組分類。

B、分析每一組Mdisk中的所有硬盤，得到相關raid信息。

C、使用專業的數據恢復軟件對Mdisk進行虛擬重組。

2、 pool分析

A、對所有Mdisk進行分析，得到pool的相關信息。

B、解析pool在Mdisk上的分布情況。

3、LUN結構分析

A、分析pool中的條帶大小。

B、解析LUN位圖，分析各LUN在pool中的分布情況。

C、編寫程序提取LUN。
五、 掉盤分析
根據raid5的特性得知，其最大允許一塊成員盤離線，即在有一塊成員盤故障的情況下還可以正常使用。客戶存儲設備已經失效，各組Mdisk中只有一塊硬盤離線。

提取V7000存儲的日志，通過分析日志得到各故障硬盤的離線順序。

六、驗證數據
對生成出的數據進行隨機抽樣檢測，數據沒有問題。
七、數據移交
客戶提供存儲設備，在存儲設備上創建與原先環境一樣大小數量的LUN，將提取出的數據LUN的鏡像文件，使用dd的方式，復制到存儲上創建的LUN中，交給客戶。
八、恢復結果
數據移交后，客戶重新配置存儲環境，數據一切正常。本次數據恢復工作圓滿完成。