重復數據刪除技術分析及分類

1.3 基于消冗執(zhí)行次序的分類

(1)在線式消冗

在線處理的重復數據刪除是指在數據寫入磁盤之前執(zhí)行重復數據刪除。其最大的優(yōu)點是經濟高效，可以降低對存儲容量的需求，并且不需要用于保存還未進行重復數據刪除的數據集。在線處理的重復數據刪除減少了數據量，但同時也存在一個問題，處理本身會減慢數據吞吐速度。正是因為重復數據刪除是在寫入到磁盤之前進行的，因此重復數據刪除處理本身就是一個單點故障。

(2)后處理式消冗

后處理的重復數據刪除，也被稱為離線重復數據刪除，是在數據寫到磁盤后再執(zhí)行重復數據刪除。數據先被寫入到臨時的磁盤空間，之后再開始重復數據刪除，最后將經過重復數據刪除的數據拷貝到末端磁盤。由于重復數據刪除是數據寫入磁盤后再在單獨的存儲設備上執(zhí)行的，因此不會對正常業(yè)務處理造成影響。管理員可以隨意制訂重復數據刪除的進程。通常先將備份數據保留在磁盤上再進行重復數據刪除，企業(yè)在需要時可以更快速地訪問最近存儲的文件和數據。而后處理方式的最大問題在于它需要額外的磁盤空間來保存全部還未刪除的重復數據集。

1.4 基于實現(xiàn)層次的分類

(1)基于軟件的重復數據刪除

在軟件層次，重復數據刪除可以有兩種集成方式，即可以將軟件產品安裝在專用的服務器上實現(xiàn)，也可以將其集成到備份/歸檔軟件中?；谲浖闹貜蛿祿h除的部署成本比較低；但是基于軟件的重復數據刪除在安裝中容易中斷運行，維護也更加困難。

基于軟件的重復數據刪除產品有EMC公司的Avamar軟件產品、Symantec公司的Veritas NetBackup產品以及Sepaton公司的DeltaStor存儲軟件等。

(2)基于硬件的重復數據刪除

基于硬件的重復數據刪除主要由存儲系統(tǒng)自己完成數據的刪減，例如：在虛擬磁帶庫系統(tǒng)、備份平臺或者網絡附加存儲(NAS)等一般目的的存儲系統(tǒng)中融入重復數據刪除機制，由這些系統(tǒng)自身完成重復數據刪除功能。

基于硬件的重復數據刪除的優(yōu)點是高性能、可擴展性和相對無中斷部署，并且重復數據刪除操作對上層的應用都是透明的。這種設備的缺點就是部署成本比較高，要高于基于軟件的重復數據刪除。

目前基于硬件的重復數據刪除系統(tǒng)主要包括VTL和NAS備份產品兩大類，例如：Data Domain公司的DD410系列產品、Diligent Technologies公司的ProtecTier VTL、昆騰公司的DXi3500和DXi5500系列產品、飛康的VTL產品、ExaGrid Systems公司的NAS備份產品以及NetApp的NearStore R200和FAS存儲系統(tǒng)。