[00092199]數據冗余識別方法
技術詳細介紹
一種數據冗余識別方法，包括：在待計算數據內容的字節序列中確定窗口長度；確定并行計算的窗口數及跳轉間隔；根據已算得的窗口指紋值并行計算各窗口的指紋值；標記窗口指紋值符合預定的數據分塊邊界條件的窗口位置為數據分塊邊界；計算數據分塊的散列值，并標記數據分塊的散列值與已存儲的數據分塊散列值相等的為冗余數據塊。該數據冗余識別方法通過并行窗口同時計算多個窗口的指紋值并與預定的分塊條件和冗余條件進行比對以確定數據分塊邊界和冗余數據塊，識別速率高、可適應高速大容量存儲、高帶寬數據傳輸的要求。
