14.2.3 Дедупликация данных
Дедупликация (Deduplication) – метод экономии пространства, используемый для устранения дубликатов данных, что приводит к оптимизации хранения и повышения эффективности использования ресурсов.
Дедупликация (Deduplication) обеспечивается на пуле. Система находит повторяющиеся данные, сравнивая контрольную сумму (Checksum) записанного блока данных. Затем дублирующиеся блоки отбрасываются и заменяются ссылками или указателем на один общий блок.
Дедупликация (Deduplication) обеспечивает эффективность хранения СХД (Storage Efficiency) за счет устранения избыточных данных.
Рисунок 1. Дедупликация данных (Data Deduplication)
В Unified Storage используются алгоритмы дедупликации (Deduplication): verify, sha256, sha512, skein.
Примечание: Выбор и настройка алгоритма дедупликации (Deduplication) индивидуальны для каждого конкретного Каталога (Directory).