威聯通科技股份有限公司(QNAP Systems, Inc.) - 網路儲存設備(NAS)

Language

Support

請簡述資料重複刪除的技術原理。

適用機型:

回答:

資料重複刪除 (Data Deduplication) 的技術有分為檔案層級與區塊層級,ES NAS 的資料重複刪除 (Data Deduplication) 技術,可同時處理區塊層級 (block level) 與檔案層級 (file level) 的資料,因此無論是 iSCSI LUN 或 Shared Folder 儲存空間,都可以開啟這個功能。

功能的實作方式,則是使用 SHA-256 散列表 (hash table) 做目標檔案的比對,由於兩個不同的資料經運算後,會產生相同 SHA-256 雜湊值的機率非常低,所以系統只對那些具有不同雜湊值的資料做寫入的動作,如此來實現相同資料刪除的目的。

散列表 (hash table) 平常會存在硬碟,當有新寫入動作需要比對時,再把散列表讀進記憶體內,加速比對工作,以決定新檔案是否寫入磁碟,因此資料重複刪除的功能將會運用到CPU 跟記憶體的資源。

若寫入檔案跟舊檔案沒有重複,會因計算而略為降低寫入速度。但若寫入檔案跟舊檔案已經重複,經 NAS 比對重複資料表確認後,則不需有任何寫入行為,反而能省下實際寫入時間,而讀取方面則不受影響。

發佈日期: 2016-08-04
覺得這篇文章對您有幫助?
謝謝您,我們已經收到您的意見。
謝謝您,我們已經收到您的意見。若有任何問題,歡迎來信 support@qnap.com