Bu içerik makine çevirisidir. Lütfen Makine Çevirisi Sorumluluk Reddi metnine bakın.

Will deduplication deduplicate data between two files with identical content if one is compressed but the other is not?

Yinelenenleri kaldırma sıkıştırılmış olan bir dosya ile sıkıştırılmamış olan bir dosya arasında aynı içeriğe sahip verileri yineler mi?

Last modified date: 2024-10-25

Applicable Products

QuTS hero
Storage & Snapshots

Short Answer

In most cases, only some data between the two files will be deduplicated.

Background

Compression and deduplication are data reduction features in QuTS hero that help reduce the amount of space occupied by your data.

Compression removes redundant data within a file.
Deduplication eliminates duplicates of data within a shared folder or LUN.

You can enable or disable each feature separately for each shared folder and LUN in Storage & Snapshots > Storage > Storage/Snapshots, under the Data Reduction column. (Note: To enable deduplication, your NAS must have at least 8 GB of memory.)

Scenario

You first add a file to a shared folder with both compression and deduplication enabled. Later, you disable compression on the shared folder, and then add the same file under a different file name.

You end up with two files with identical content, but the first one is compressed and the second one is uncompressed.

Question: Will deduplication consider the data in the two files to be the same and therefore deduplicate the data between them?

Long Answer

Because compression and deduplication are both block-based technologies, they determine data redundancy by comparing data blocks.

If all data in the first file is successfully compressed, then all the data blocks in the first file would be different from all the data blocks in the second file, where compression did not occur. Therefore, there will be no deduplication between the two files.

However, it is uncommon for all data within a file to have redundancy, so in most cases not all data blocks within a file would be compressed. In such cases, some data blocks in the first file would remain identical to some data blocks in the second file, and therefore such blocks would be deduplicated.

Note

Enabling or disabling compression only affects new data. Existing data remains compressed or uncompressed according to the compression setting when the data was added to the shared folder or LUN.
Enabling or disabling deduplication only affects new data. Existing data remains deduplicated or undeduplicated according to the deduplication setting when the data was added to the shared folder or LUN.

Uygulanabilir Ürünler

QuTS hero
Storage & Snapshots

Kısa Cevap

Çoğu durumda, iki dosya arasındaki verilerin yalnızca bir kısmı yinelenmeyecektir.

Arka Plan

Sıkıştırma ve Yinelenenleri kaldırma , verilerinizin kapladığı alanı azaltmaya yardımcı olan QuTS hero 'deki veri azaltma özellikleridir.

Sıkıştırma, bir dosya içindeki gereksiz verileri kaldırır.
Yinelenenleri kaldırma , paylaşılan bir klasör veya LUN içindeki yinelenen verileri ortadan kaldırır.

Her bir paylaşılan klasör ve LUN için her bir özelliği ayrı ayrı etkinleştirebilir veya devre dışı bırakabilirsiniz Depolama ve Anlık Görüntüler > Depolama > Depolama / Anlık Görüntü , Veri Azaltma sütunu altında. (Not: Yinelenenleri kaldırma 'ı etkinleştirmek için NAS'ınızın en az 8 GB belleğe sahip olması gerekir.)

Senaryo

Önce sıkıştırma ve Yinelenenleri kaldırma etkinleştirilmiş bir paylaşılan klasöre bir dosya ekliyorsunuz. Daha sonra, paylaşılan klasörde sıkıştırmayı devre dışı bırakıyorsunuz ve ardından aynı dosyayı farklı bir dosya adı altında ekliyorsunuz.

Sonuç olarak, aynı içeriğe sahip iki dosyanız olur, ancak birincisi sıkıştırılmış ve ikincisi sıkıştırılmamış olur.

Soru: Yinelenenleri kaldırma , iki dosyadaki verileri aynı olarak kabul edip, bu verileri yineler mi?

Uzun Cevap

Sıkıştırma ve Yinelenenleri kaldırma her ikisi de blok tabanlı teknolojiler olduğundan, veri fazlalığını veri bloklarını karşılaştırarak belirlerler.

İlk dosyadaki tüm veriler başarıyla sıkıştırılmışsa, ilk dosyadaki tüm veri blokları, sıkıştırmanın gerçekleşmediği ikinci dosyadaki tüm veri bloklarından farklı olacaktır. Bu nedenle, iki dosya arasında Yinelenenleri kaldırma olmayacaktır.

Ancak, bir dosya içindeki tüm verilerin fazlalığa sahip olması nadirdir, bu yüzden çoğu durumda bir dosya içindeki tüm veri blokları sıkıştırılmaz. Bu tür durumlarda, ilk dosyadaki bazı veri blokları ikinci dosyadaki bazı veri bloklarıyla aynı kalır ve bu nedenle bu bloklar yinelenir.

Not

Sıkıştırmayı etkinleştirmek veya devre dışı bırakmak yalnızca yeni verileri etkiler. Mevcut veriler, paylaşılan klasöre veya LUN'a eklendiğinde sıkıştırma ayarına göre sıkıştırılmış veya sıkıştırılmamış olarak kalır.
Yinelenenleri kaldırma 'ı etkinleştirmek veya devre dışı bırakmak yalnızca yeni verileri etkiler. Mevcut veriler, paylaşılan klasöre veya LUN'a eklendiğinde Yinelenenleri kaldırma ayarına göre yinelenmiş veya yinelenmemiş olarak kalır.

Daha Fazla Okuma

Was this article helpful?

Yes. No.

100% of people think it helps.

Please tell us how this article can be improved:

The article is missing important information
The article's solutions do not work
The article is too complicated
The article contains incorrect information
The article is out-of-date

If you want to provide additional feedback, please include it below.