| 编程 |
data deduplication (особый метод сжатия данных, применяемый обычно при резервном копировании, предусматривающий анализ массивов данных, идентификацию и сохранение уникальных элементов-фрагментов данных (chunk), или байтовых строк (байтовых последовательностей, byte pattern, byte string); если далее в процессе анализа исходного массива встречаются уже сохранённые элементы, они заменяются просто указателями на место их хранения. Поскольку один и тот же элемент данных может встречаться в массиве десятки, сотни и даже тысячи раз (в зависимости от размера элемента), такой метод сжатия позволяет существенно уменьшить количество данных, которое нужно хранить в памяти или передавать по каналам связи. Различают такие виды дедупликации, как поточная дедупликация (in-line deduplication), постдедупликация (post-process deduplication), дедупликация у источника (source deduplication) или у получателя данных (target deduplication), при этом первые два вида определяют время (режим), а вторые два – место дедупликации ssn) |
