一種數據塊自愈式的雲存儲方法以及修複方法
2023-09-16 15:30:35 1
一種數據塊自愈式的雲存儲方法以及修複方法
【專利摘要】本發明公開了一種數據塊自愈式的雲存儲方法，解決了現有技術中雲計算中心通常將數據塊切碎成多塊數據片存儲在物理磁碟，當物理磁碟損壞時容易造成數據丟失，且不能進行快速恢復的問題。該數據塊自愈式的雲存儲方法，包括以下步驟：創建虛擬磁碟，建立資源池；將數據塊切碎成數據片，並對每片數據片進行編號；將每片數據片進行複製備份，且每片數據片至少備份一份並放入不同的數據節點，並將數據片實際存儲信息地址存到元數據裡面；當某一數據節點中的數據片損壞時，根據該數據節點中的數據片編號從元數據中查詢該數據片其他備份數據片的地址；從其他備份所在的數據節點中重新讀取數據片；將重新讀取的數據片寫入本地，進行修復。
【專利說明】一種數據塊自愈式的雲存儲方法以及修複方法
【技術領域】
[0001] 本發明屬於雲存儲【技術領域】，具體的說，是涉及一種數據塊自愈式的雲存儲方法 及修複方法。
【背景技術】
[0002] 對於私有雲或者公共雲來說，雲存儲都是雲計算基礎架構中重要的組成部分。一 款優秀的雲存儲解決方案架構能夠幫助用戶實現高效、合理、自動化的使用存儲資源，也是 衡量雲計算基礎架構是否成功的一大標識。然而在當今這個信息膨脹的時代，數據的容量 和複雜度比以往任何時刻都要大。因此，面對日漸複雜的數據環境，構建一個高效性、擴展 性和靈活性的雲存儲解決方案就成為用戶IT基礎架構建設的必需。
[0003] 隨著數據量的不斷增加，數據的安全性要求也在不斷增加。數據不僅要有足夠的 容量空間去存儲，還需要實現數據的安全備份和遠程容災。不僅要保證本地數據的安全性， 還要保證當本地發生重大的災難時，可通過遠程備份或遠程容災系統進行快速恢復。
[0004] 目前，一般的雲計算中心通常將數據塊切碎成多塊數據片存儲在物理磁碟。但是 當物理磁碟損壞時容易造成數據丟失；發現某塊數據損壞時，需要人工檢索，不能進行快速 恢復。
【發明內容】
[0005] 本發明的目的在於克服上述缺陷，提供一種數據節點自動檢查、修復，節約人力成 本人的數據塊自愈式的雲存儲方法。
[0006] 為了實現上述目的，本發明採用了技術方案如下： 一種數據塊自愈式的雲存儲方法，包括以下步驟： (1) 創建虛擬磁碟,建立資源池； (2) 將數據塊切碎成數據片，並對每片數據片進行編號； (3) 將每片數據片進行複製備份，且每片數據片至少備份一份，將數據片原件及備份件 分別放入不同的數據節點，並將所有數據片實際存儲信息地址存到元數據裡面。
[0007] 步驟（3)中每片數據片的備份數量至少為兩份，並連同原件分別放入不同的數據 節點中。
[0008] -種數據塊自愈式的雲存儲方法的修複方法，包括以下步驟： (4) 當某一數據節點中的數據片損壞時，根據該數據節點中的數據片編號從元數據中 查詢該數據片其他備份數據片的地址； (5) 從其他備份所在的數據節點中重新讀取數據片； (6) 將重新讀取的數據片寫入本地，進行修復。
[0009] 數據節點自動檢查放入其中的數據片是否有損壞，若有則執行所述步驟（4)至步 驟（6)進行修復。
[0010] 與現有技術相比，本發明的有益效果在於： (1)本發明將數據節點自動檢查，節約人力成本人，且可完成自動修復，大幅度提升數 據的安全性。
[0011] (2)本發明快速的修復過程，提高了工作性能，且容易實現集群控制和管理。
【具體實施方式】
[0012] 下面結合實施例對本發明作進一步說明。本發明的實施方式包括但不限於下列實 施例。 實施例
[0013] 本實施例提供了一種數據塊自愈式的雲存儲方法，包括以下步驟： (1) 創建虛擬磁碟,建立資源池； (2) 將數據塊切碎成數據片，並對每片數據片進行編號； (3) 將每片數據片進行複製備份，且每片數據片至少備份一份，將數據片原件及備份件 分別放入不同的數據節點，並將數據片實際存儲信息地址存到元數據裡面。
[0014] 其中，步驟（3)中每片數據片的備份數量至少為兩份，並連同原件分別放入不同的 數據節點中。
[0015] 基於上述的雲存儲方法，本實施例還提供了一種修複方法，包括以下步驟： (4) 當某一數據節點中的數據片損壞時，根據該數據節點中的數據片編號從元數據中 查詢該數據片其他備份數據片的地址； (5) 從其他備份所在的數據節點中重新讀取數據片； (6) 將重新讀取的數據片寫入本地，進行修復。
[0016] 作為優選，數據節點自動檢查放入其中的數據片是否有損壞，若有則執行上述步 驟（4)至步驟（6)進行修復。
[0017] 為了便於本領域技術人員對本發明有更清晰的了解和認識，下面舉例進行說明： 首先，建立虛擬磁碟，將數據塊切成四片，編號為1、2、3、4,分別為：數據片1、數據片2、 數據片3和數據片4 ;然後，對每片數據片進行複製備份，並將原件和備份件分別放入到不 同的數據節點，具體如下： 1、 數據片1複製兩份，將三份數據片1分別放在三個數據節點D1、D2、D3 ; 2、 數據片2複製兩份，將三份數據片2分別放在三個數據節點D1、D2、D3 3、 數據片3複製兩份，將三份數據片3分別放在三個數據節點D1、D2、D3 ; 4、 數據片4複製兩份，將三份數據片4分別放在三個數據節點D1、D2、D3 ;通過上述，則 每個數據節點裡均放入了四個數據片，分別為：數據片1、數據片2、數據片3和數據片4。
[0018] 數據節點自動檢查，檢查放入其內的數據片是否有損壞，若發現數據節點D1中的 數據片損壞後(數據片1、數據片2、數據片3和數據片4)，則在元數據伺服器裡查詢該數據 節點D1中數據片的其他幾分備份數據片的地址信息，在元數據裡查詢到數據片1、數據片 2、數據片3和數據片4的備份存放在數據節點D2和數據節點D3中；然後，從數據節點D2 或/和數據節點D3裡重新讀取正確數據片1、數據片2、數據片3和數據片4,並將讀取的數 據片寫入數據節點D1，進行修復。
[0019] 按照上述實施例，便可很好地實現本發明。值得說明的是，基於上述設計原理的前 提下，為解決同樣的技術問題，即使在本發明所公開的結構基礎上做出的一些無實質性的 改動或潤色，所採用的技術方案的實質仍然與本發明一樣，故其也應當在本發明的保護範 圍內。
【權利要求】
1. 一種數據塊自愈式的雲存儲方法，其特徵在於，包括以下步驟： (1) 創建虛擬磁碟,建立資源池； (2) 將數據塊切碎成數據片，並對每片數據片進行編號； (3) 將每片數據片進行複製備份，且每片數據片至少備份一份，將數據片原件及備份件 分別放入不同的數據節點，並將所有數據片實際存儲信息地址存到元數據裡面。
2. 根據權利要求1所述的一種數據塊自愈式的雲存儲方法，其特徵在於，步驟（3)中每 片數據片的備份數量至少為兩份，並連同原件分別放入不同的數據節點中。
3. 由權利要求1所述的一種數據塊自愈式的雲存儲方法的修複方法，其特徵在於，包 括以下步驟： (4) 當某一數據節點中的數據片損壞時，根據該數據節點中的數據片編號從元數據中 查詢該數據片其他備份數據片的地址； (5) 從其他備份所在的數據節點中重新讀取數據片； (6) 將重新讀取的數據片寫入本地，進行修復。
4. 根據權利要求3所述的修複方法，其特徵在於，數據節點自動檢查放入其中的數據 片是否有損壞，若有則執行所述步驟（4)至步驟（6)進行修復。
【文檔編號】H04L29/08GK104158864SQ201410376148
【公開日】2014年11月19日 申請日期:2014年8月2日 優先權日:2014年8月2日
【發明者】黃睿 申請人:成都致雲科技有限公司