Data Domain. Ограничения и рекомендации по передовому опыту применения Veeam

Приведенная ниже информация взята непосредственно из руководства пользователя Veeam Backup & Replication 12 для VMware vSphere.  

• Мы настоятельно рекомендуем следовать рекомендациям из этого руководства, а также рекомендациям из статьи Veeam kb1745 Deduplication Appliance Best Practices. 
• Начиная с Veeam Backup & Replication версии 12 устройства хранения с дедупликацией используют подключение TLS.

Подключение TLS можно отключить с использованием значения реестра для устройств хранения с дедупликацией, которые не поддерживают подключение TLS. Дополнительную информацию см. в статье Veeam kb4429 Quantum DXi Storage With Firmware 3.x Does Not Work with Veeam Backup & Replication 12.

• Использование Dell Data Domain с DD Boost не гарантирует повышения производительности при выполнении заданий. Оно снижает нагрузку на сеть и повышает пропускную способность сети.
• В Dell Data Domain должны быть включены службы NFS. В противном случае Veeam Backup & Replication не сможет получить доступ к системе хранения.
• Не включайте шифрование для заданий, предназначенных для устройства хранения с дедупликацией. Шифрование оказывает негативное воздействие на коэффициент дедупликации. Дополнительную информацию см. в разделе Data Encryption. 
• Также шифрование может воздействовать на размер резервной копии. Размер резервной копии может превышать размер исходной виртуальной машины. При включении шифрования выберите размер блока обработки данных 4 Мбайт и распаковку на целевом устройстве и выравнивание блоков (эти настройки включены по умолчанию). Размер резервной копии увеличивается на 1 Мбайт для каждого блока данных размером 4 Мбайт.

Это связано с тем, что Veeam Backup & Replication считывает блоки размером 4 Мбайт, зашифровывает их, добавляет в каждый блок данных метаданные размером 16 Кбайт, а затем выравнивает блоки данных.

В результате каждый блок данных размером 4 Мбайт в исходной системе становится блоком размером 5 Мбайт в целевой системе.

• При создании задания резервного копирования, предназначенного для репозитория резервного копирования Dell Data Domain, Veeam Backup & Replication предлагает переключиться на оптимизированные настройки задания и использовать размер блока данных 4 Мбайт для рабочей нагрузки.

Обработка данных (настройка Storage optimization). Рекомендуется использовать оптимизированные настройки задания. Большие блоки данных создают уменьшенную таблицу метаданных, которая требует меньше памяти и ресурсов ЦП для обработки.

Дополнительную информацию об оптимизации хранилища см. в разделе Data Compression and Deduplication. 

• Dell Data Domain не поддерживает метод обратного инкрементного резервного копирования.
• Репозитории резервного копирования Dell Data Domain нельзя использовать в качестве исходных или целевых ресурсов для заданий копирования файлов.
• Длина прямых инкрементных и бесконечных прямых инкрементных цепочек резервного копирования (цепочек, содержащих одну полную резервную копию и набор последующих инкрементных резервных копий) не может превышать 120 точек восстановления.

Для преодоления этого ограничения планируйте создание полных резервных копий (активных или синтетических) так, чтобы цепочка резервного копирования разделялась на более короткие серии. Например, чтобы выполнять резервное копирование с 15-минутными интервалами 24 часа в сутки, необходимо запланировать создание полных синтетических резервных копий на каждый день. В этом сценарии интервалы сразу после полуночи могут пропускаться из-за продолжительности синтетической обработки. Дополнительную информацию см. в разделе How Synthetic Full Backup Works 

• При подключении к репозиторию резервного копирования Dell Data Domain по протоколу Fibre Channel необходимо явно определить сервер шлюза для обмена данными с Dell Data Domain.

В качестве сервера шлюза необходимо использовать сервер Microsoft Windows, который добавляется в инфраструктуру резервного копирования и обладает доступом к репозиторию резервного копирования Dell Data Domain по протоколу Fibre Channel.

• Во время повторного сканирования репозитория резервного копирования Veeam Backup & Replication определяет, установлено ли для устройства хранения жесткое ограничение потока, и отображает эту информацию в статистике повторного сканирования репозитория резервного копирования.

Если жесткое ограничение потока превышается при выполнении Veeam Backup & Replication задач в связи с репозиторием резервного копирования, Veeam Backup & Replication не может создавать новые потоки ввода-вывода.

• Во время повторного сканирования репозитория резервного копирования Veeam Backup & Replication определяет, установлено ли для устройства хранения жесткое ограничение потока, и отображает эту информацию в статистике повторного сканирования репозитория резервного копирования.

Если жесткое ограничение потока превышается при выполнении Veeam Backup & Replication задач в связи с репозиторием резервного копирования, Veeam Backup & Replication не сможет создавать новые потоки ввода-вывода.
 

Статья Veeam kb1745 Deduplication Appliance Best Practices 

Общие рекомендации по настройке

Ниже приведены общие рекомендации по настройке Veeam Backup & Replication, которые следует использовать при резервном копировании в хранилище с дедупликацией.

Настройки на уровне заданий

Все указанные в статье Veeam kb1745 рекомендации, документированные поставщиком и предназначенные для поставщика , заменяют приведенные ниже рекомендации.

Настройки заданий резервного копирования

Расширенные настройки
Ниже приведены общие рекомендации по расширенным настройкам (Storage > Advanced).

Вкладка Backup
Как правило, устройства с дедупликацией обладают наименьшей производительностью во время операций чтения. Таким образом, для обеспечения максимальной производительности задания резервного копирования должны быть предназначены только для записи. Для достижения этой цели настройте задание резервного копирования так, чтобы оно использовало режим (Forward) Incremental и еженедельно создавало активные полные резервные копии.

• Режим резервного копирования

  • (Forward) Incremental 

• Active full backup 

  • Параметр включен и установлен на еженедельное выполнение задания.
    Еженедельное создание полных точек восстановления позволяет считывать как можно меньше точек во время восстановления.

Вкладка Maintenance

• Perform backup files health check 

  • Параметр отключен
    Включение этой функции при использовании хранилища с дедупликацией возможно, но требует выполнения множества операций чтения, что займет длительное время. При использовании больших файлов резервных копий в хранилище с дедупликацией применение этой функции может приводить к тому, что задание резервного копирования будет тратить несколько дней на выполнение проверки работоспособности, в результате чего не будет создавать новые точки восстановления.

• Defragment and compact full backup file 

  • Параметр отключен
    Этот параметр не требуется использовать при создании активных полных резервных копий.

Вкладка Storage

• Inline data deduplication 

  • Параметр отключен
    Отключение дедупликации в Veeam Backup & Replication приводит к тому, что размеры точек восстановления увеличиваются, но поскольку Veeam не выполняет их дедупликацию, функция дедупликации хранилища становится более эффективной.

    ПРИМЕЧАНИЕ. Включение дедупликации Veeam может оказать благоприятное воздействие на хранилище, которое использует зону без дедупликации для хранения первоначально записанных файлов, например Landing Zone ExaGrid. Благодаря этому обеспечивается хранение большего количества точек восстановления в состоянии быстрого доступа до обработки системой дедупликации хранилища.

• Compression level 

  • Optimal или Dedupe-friendly
    В разделе этой статьи «Настройки репозитория» рекомендуется включить функцию, которая будет вызывать распаковку всех точек восстановления перед их записью. Таким образом, настройка сжатия на уровне задания влияет только на сжатие данных при передаче данных резервного копирования по сети. Для снижения перегрузки сети можно использовать сжатие Optimal или Dedupe-friendly. Последнее позволяет немного снизить трудозатраты, необходимые для распаковки перед записью. Настройку сжатия на уровне задания редко нужно отключать, поскольку ее отключение существенно увеличивает объем данных, которые необходимо передавать по сети на компьютер, записывающий данные в репозиторий резервного копирования.

• Storage optimization (Block Size) 

  • 4 MB
    Этот параметр размера блока, который прежде назывался Local target (large blocks), поможет повысить производительность при хранении файлов резервных копий в хранилище с дедупликацией, поскольку он уменьшает размер внутренней таблицы метаданных файла резервной копии.

• Encryption 

  • Параметр отключен
    Шифрование данных оказывает негативное воздействие на коэффициент дедупликации, если в качестве целевого устройства используется устройство хранения с дедупликацией. Veeam Backup & Replication использует разные ключи шифрования для каждого сеанса задания. По этой причине блоки зашифрованных данных, отправляемые на устройства хранения с дедупликацией, выглядят неодинаково, хотя могут содержать дублирующиеся данные. Если вы хотите повысить коэффициент дедупликации, можно отключить шифрование данных. Если вы хотите продолжать использовать шифрование, можно включить функцию шифрования на самом устройстве хранения с дедупликацией.

Рис. 1. Включение функции шифрования на устройстве хранения с дедупликацией.
 

Рис. 2. Задание настроек обслуживания для уровня хранилища и полного резервного копирования
 

Рис. 3. Настройка сокращения объема данных, уровня сжатия и оптимизации хранилища

Все указанные в статье Veeam kb1745 рекомендации, документированные поставщиком и предназначенные для поставщика , заменяют приведенные ниже рекомендации.

Простая таблица поддержки Veeam Data Domain Boost

Простая таблица поддержки программного обеспечения для резервного копирования Veeam Data Domain

Поддерживаемые функции Dell Data Domain
Технология DD Boost предлагает набор функций для усовершенствованной обработки данных. Veeam Backup & Replication поддерживает следующие функции:

• Распределенная обработка сегментов
• Усовершенствованная балансировка нагрузки и переключение каналов при отказе
• Создание виртуальных синтетических копий В дополнение к этим технологиям Veeam Backup & Replication поддерживает шифрование данных в процессе работы и потоки каждого устройства хранения.

Распределенная обработка сегментов
Распределенная обработка сегментов позволяет Dell Data Domain «распределять» процесс дедупликации и выполнять часть операций дедупликации данных на стороне сервера шлюза. Без распределенной обработки сегментов Dell Data Domain выполняет дедупликацию в системе хранения Dell Data Domain. Сервер шлюза отправляет блоки нефильтрованных данных в Dell Data Domain по сети. Операции сегментации, фильтрации и сжатия данных выполняются на целевой стороне до записи данных на диск. При распределенной обработке сегментов операции сегментации, фильтрации и сжатия данных выполняются на стороне сервера шлюза. Сервер шлюза отправляет в Dell Data Domain только блоки уникальных данных. В результате нагрузка на сеть снижается, а пропускная способность сети повышается.

Усовершенствованная балансировка нагрузки и переключение каналов при отказе
Усовершенствованная балансировка нагрузки и переключение каналов при отказе позволяют балансировать нагрузку передачи данных и перенаправлять трафик данных виртуальной машины на работающий канал при перебоях в работе сети. Без усовершенствованной балансировки нагрузки каждый сервер шлюза подключается к Data Domain по выделенному каналу Ethernet. Такая конфигурация не обеспечивает возможность балансировки нагрузки передачи данных с применением различных каналов. Если в процессе передачи данных возникает какая-либо сетевая ошибка, задание резервного копирования завершается сбоем и требует повторного запуска. Усовершенствованная балансировка нагрузки позволяет объединить несколько каналов Ethernet в одну группу интерфейсов. В результате Dell Data Domain автоматически балансирует нагрузку трафика, поступающего от нескольких серверов шлюза, объединенных в одну группу. Если в этой группе отключится какой-либо канал, Dell Data Domain автоматически выполнит переключение каналов при отказе, и трафик резервного копирования будет перенаправлен на работающий канал.

Создание виртуальных синтетических копий
Veeam Backup & Replication поддерживает создание полных виртуальных синтетических копий в Dell Data Domain. Функция создания полных виртуальных синтетических копий позволяет синтезировать полную резервную копию в целевом хранилище резервных копий без физического копирования данных из исходных хранилищ данных. Для создания файла полной резервной копии Dell Data Domain использует указатели на существующие сегменты данных в целевом хранилище резервных копий. Функция создания полных виртуальных синтетических копий снижает рабочую нагрузку на сеть и компоненты инфраструктуры резервного копирования и повышает эффективность выполнения заданий резервного копирования.

Шифрование данных в процессе работы
Veeam Backup & Replication поддерживает функцию шифрования в процессе работы, представленную в Dell Data Domain Boost 3.0. При необходимости можно включить шифрование данных на уровне репозитория резервного копирования. Veeam Backup & Replication будет использовать технологию Dell Data Domain для шифрования данных, передаваемых между библиотекой DD Boost и системой Data Domain.

Потоки каждого устройства хранения
Veeam Backup & Replication поддерживает потоки каждого устройства хранения в Dell Data Domain. Максимальное количество параллельных задач, которые могут быть предназначены для репозитория резервного копирования (параметр Limit maximum concurrent tasks to N), относится к устройству хранения, а не ко всей системе Dell Data Domain.

Ускоренное восстановление всей виртуальной машины
Чтобы ускорить восстановление всей виртуальной машины в Dell Data Domain, Veeam Backup & Replication использует механизм последовательного чтения данных из резервных копий и параллельного восстановления дисков виртуальной машины. Системы хранения Dell Data Domain оптимизированы для последовательных операций ввода-вывода. При этом блоки данных дисков виртуальной машины в файлах резервных копий хранятся не последовательно, а в произвольном порядке. Если блоки данных дисков виртуальной машины считываются в произвольном порядке, производительность восстановления из резервных копий в Dell Data Domain снижается. Чтобы ускорить процесс восстановления, Veeam Backup & Replication создает карту блоков данных в файлах резервных копий. Созданная карта используется для последовательного чтения блоков данных дисков виртуальной машины из файлов резервных копий в том порядке, в котором они находятся на диске. Veeam Backup & Replication записывает блоки данных в целевом хранилище в том порядке, в котором они поступают из целевого модуля переноса данных Veeam, параллельно восстанавливая несколько дисков виртуальной машины. Этот механизм ускоренного восстановления включен по умолчанию и используется для сценария восстановления всей виртуальной машины.
 

Как работает ускоренное восстановление
Восстановление всей виртуальной машины из резервных копий в Dell Data Domain выполняется следующим образом.

1. Veeam Backup & Replication открывает все файлы резервных копий в цепочке резервного копирования, считывает метаданные из этих файлов резервных копий и кэширует эти метаданные на прокси-сервере резервного копирования, назначенном для задачи восстановления.
2. Veeam Backup & Replication использует кэшированные метаданные для создания карты блоков данных. Карта содержит ссылки на блоки данных виртуальной машины, отсортированные по дискам виртуальной машины.
3. Каждый диск виртуальной машины обрабатывается в рамках отдельной задачи. Для каждой задачи Veeam Backup & Replication запускает отдельный модуль переноса данных Veeam на прокси-сервере резервного копирования. Модули переноса данных Veeam последовательно считывают блоки данных дисков виртуальной машины из репозитория резервного копирования в том порядке, в котором эти блоки находятся на диске, и помещают прочитанные блоки данных в буфер на прокси-сервере резервного копирования.
4. Блоки данных записываются в целевом хранилище в том порядке, в котором они поступают из целевого модуля переноса данных Veeam.

Рис. 8. Рабочий процесс ускоренного восстановления

Прокси-сервер резервного копирования для ускоренного восстановления
Veeam Backup & Replication восстанавливает все диски виртуальной машины с помощью одного прокси-сервера резервного копирования. Если вы поручите Veeam Backup & Replication автоматически выбрать прокси-сервер резервного копирования для задачи восстановления, программное обеспечение выберет наименее загруженный прокси-сервер резервного копирования в инфраструктуре резервного копирования. Если вы явно назначите прокси-сервер резервного копирования, Veeam Backup & Replication будет использовать выбранный прокси-сервер резервного копирования. Для каждого диска виртуальной машины Veeam Backup & Replication запускает отдельный модуль переноса данных Veeam на прокси-сервере резервного копирования. Например, при восстановлении виртуальной машины с 10 дисками Veeam Backup & Replication запускает 10 модулей переноса данных Veeam на прокси-сервере резервного копирования. Прокси-сервер резервного копирования, назначенный для задачи восстановления всей виртуальной машины, должен иметь достаточно ресурсов ОЗУ для параллельного восстановления дисков виртуальной машины. Для каждого диска виртуальной машины требуется 200 Мбайт ОЗУ. Общий объем необходимых ресурсов ОЗУ вычисляется по следующей формуле: общий объем ОЗУ = количество дисков виртуальной машины × 200 Мбайт. Перед началом процесса восстановления Veeam Backup & Replication проверяет объем ресурсов ОЗУ на прокси-сервере резервного копирования. Если на прокси-сервере резервного копирования недостаточно ресурсов ОЗУ, Veeam Backup & Replication отображает предупреждение в сведениях о сеансе задания и автоматически переключается на обычный режим обработки дисков виртуальной машины (данные дисков виртуальной машины считываются в произвольном порядке, а диски виртуальной машины восстанавливаются последовательно).

Ограничения ускоренного восстановления
Ускоренное восстановление всей виртуальной машины имеет следующие ограничения.

• Ускоренное восстановление работает в системах Dell Data Domain с DD Boost.
• При восстановлении виртуальной машины с динамически расширяемыми дисками процесс восстановления может быть медленным.
• При восстановлении виртуальной машины в режиме сетевого транспорта количество дисков виртуальной машины, восстанавливаемых параллельно, не может превышать количество разрешенных подключений к хосту ESXi.
• Если Dell Data Domain добавляется в качестве дополнения в репозиторий резервного копирования с горизонтальным масштабированием, для политики размещения файлов резервных копий необходимо установить значение Locality. Если для политики размещения файлов резервных копий установлено значение Performance, параллельное восстановление дисков виртуальной машины будет отключено.

Устройства хранения и ленты
Устройства хранения, используемые для хранения данных резервного копирования в режиме файлового устройства (CIFS/NFS) или блочного устройства (iSCSI/FC/SAS), не поддерживаются, если данные резервного копирования выгружаются на ленты и больше не хранятся непосредственно на файловом или блочном устройстве (управление иерархическим хранилищем с ленточным уровнем). Чтобы выгрузить данные на ленты, убедитесь в следующем. • Все данные резервного копирования хранятся на устройстве совместно (то есть все цепочки резервного копирования хранятся на устройстве целиком и не распределены по нескольким устройствам), а на лентах хранятся только копии. • Устройства эмулируют ленточную систему (VTL) в качестве протокола доступа.

Dell Data Domain

• Система Dell Data Domain должна соответствовать требованиям к программному обеспечению и оборудованию. Дополнительную информацию см. в разделе «Требования к системе».
• В системе Dell Data Domain должна быть установлена лицензия DD Boost. DD Boost необходимо включить и настроить.
• Сервер шлюза, который вы планируете использовать для работы с Dell Data Domain, необходимо добавить в инфраструктуру резервного копирования. Если система хранения Dell Data Domain не соответствует этим требованиям, ее можно добавить в виде папки SMB (CIFS). В этом случае Veeam Backup & Replication не будет использовать технологию DD Boost для работы с Dell Data Domain. Дополнительную информацию см. в разделе «Dell Data Domain».

Шаг 1. Запустите мастер создания репозитория резервного копирования.
Чтобы запустить мастер создания репозитория резервного копирования, выполните следующие действия.

1. Откройте представление Backup Infrastructure.
2. На панели Inventory нажмите правой кнопкой мыши на узел Backup Repositories и выберите Add Backup Repository. Другой вариант: нажмите Add Repository на ленте.
3. В окне Add Backup Repository выберите Deduplicating Storage Appliance и тип репозитория резервного копирования, который необходимо добавить.

Рис. 9. Запуск мастера создания репозитория резервного копирования.

Шаг 2. Укажите имя и описание репозитория резервного копирования.
На шаге мастера Name укажите имя и описание репозитория резервного копирования.

1. В поле Name укажите имя репозитория резервного копирования.
2. В поле Description укажите описание для справки в дальнейшем.

Рис. 10. Указание имени и описания репозитория резервного копирования.

Шаг 3. Укажите настройки сервера.
Параметры, которые можно указать на шаге мастера Server, зависят от типа добавляемого репозитория резервного копирования.

Dell Data Domain
Чтобы указать настройки Dell Data Domain, выполните следующие действия.

1. Укажите настройки подключения для Dell Data Domain.

• Если Dell Data Domain использует TCP, в поле Type in Data Domain server name введите полное имя DNS либо адрес IPv4 или IPv6 сервера Dell Data Domain.

ПРИМЕЧАНИЕ. Адреса IPv6 можно использовать только в том случае, если включен обмен данными IPv6, как описано в разделе IPv6 Support .

• Если Dell Data Domain использует Fibre Channel, установите флажок Use Fibre Channel (FC) connectivity. В поле Type in Data Domain server name введите имя сервера Data Domain Fibre Channel. Чтобы получить имя сервера Data Domain Fibre Channel, в Data Domain System Manager откройте вкладку Data Management > DD Boost > Fibre Channel.

2. В поле Credentials укажите учетные данные учетной записи пользователя для подключения к серверу Dell Data Domain или серверу Dell Data Domain Fibre Channel.

Если учетные данные не были настроены ранее, нажмите на ссылку Manage accounts в нижней части списка или нажмите расположенную справа кнопку Add, чтобы добавить учетные данные. Дополнительную информацию см. в разделе Managing Credentials. 

3. Чтобы использовать шифрование в процессе работы между прокси-сервером резервного копирования и Dell Data Domain, установите флажок Enable DDBoost encryption и выберите уровень шифрования Medium или High.
4. В поле Gateway server укажите, какой сервер шлюза вы хотите использовать.

• Если вы хотите, чтобы программное обеспечение Veeam Backup & Replication автоматически выбирало сервер шлюза, оставьте параметр Automatic selection.
• Если вы хотите явно выбрать серверы, которые могут использоваться в качестве серверов шлюза, нажмите Choose рядом с полем Gateway server. В окне Gateway Server нажмите Use the following gateway servers only и выберите серверы. Серверы должны обладать прямым доступом к устройству Dell Data Domain и располагаться как можно ближе к устройству. Veeam Backup & Replication выберет наиболее подходящий сервер.

Дополнительную информацию о серверах шлюза, соответствующих требованиях и ограничениях и принципах их выбора см. в разделе Gateway Server. 

ВАЖНАЯ ИНФОРМАЦИЯ
При подключении к Dell Data Domain по протоколу Fibre Channel необходимо явно определить серверы шлюза для обмена данными с Dell Data Domain. Выбранные вами серверы необходимо добавить в инфраструктуру резервного копирования; они должны обладать доступом к устройству Dell Data Domain по протоколу Fibre Channel.

Рис. 11. Использование Fibre Channel

Предварительно указанные расширенные настройки
В зависимости от типа используемого устройства хранения с дедупликацией Veeam Backup & Replication автоматически устанавливает следующие значения расширенных настроек.

Dell Data Domain

• Параметр Align backup file data blocks отключен и не может быть изменен.
• Параметр Decompress backup data blocks before storing включен.
• Параметр This repository is backed by rotated hard drives отключен и не может быть изменен.
• Параметр Use per-machine backup files включен.

Ограничения уровня производительности
Учитывайте следующие ограничения уровня производительности.

• К дополнениям для повышения производительности применяются те же ограничения, что и к определенным типам репозиториев резервного копирования.

Например, при добавлении Dell Data Domain в качестве дополнения для повышения производительности в репозиторий резервного копирования с горизонтальным масштабированием вы не сможете создать в этом репозитории цепочку резервного копирования длиной более 120 точек.

Порты
В компонентах инфраструктуры резервного копирования Veeam Backup & Replication автоматически создает правила межсетевого экрана для требуемых портов. Эти правила позволяют осуществлять обмен данными между компонентами.

Рис. 12. Автоматические правила межсетевого экрана для TCP 111
 

Рис. 13. Автоматические правила межсетевого экрана для портов TCP 2049 и 2052

Дополнительные статьи базы знаний о Veeam: 

• Статья Dell 194977 Veeam Backup & Replication с PowerProtect DataDomain 
• Статья Dell 197234 Data Domain Boost. Резервное копирование из VEEAM 11 или 11a под управлением Windows 2016 или 2019 в Data Domain с использованием DDBOOST по протоколу IP может завершиться сбоем и Veeam может перестать отвечать 

Статьи Data Domain об использовании ifgroups для ddboost:

• Руководство по интеграции Data Domain и Veeam Backup & Replication 9.5, февраль 2017 г.
• Руководство пользователя Veeam Backup & Replication 12 для VMware vSphere: запуск мастера создания репозитория резервного копирования