Avamar. Настройка производительности клиентского резервного копирования для наборов данных с низким отношением файлов к папкам

Процесс «avtar» клиента Avamar оптимизирован для эффективной работы с большинством наборов данных, избегая при этом чрезмерного потребления ресурсов.

Время от времени "avtar" может сталкиваться с наборами данных, характеристики которых отличаются от сильных сторон параметров настройки по умолчанию, выбранных инженерами, и могут не соответствовать им.

Набор данных для большинства резервных копий файловых систем обычно имеет соотношение файлов и папок примерно 10:1.

Наборы данных с низким отношением файлов к папкам, например 1:1 или 2:1, могут испытывать снижение производительности при прочих равных условиях.

Соотношение файлов и папок можно проверить, просмотрев полный журнал резервного копирования для следующей записи.
 

2015-11-18 00:34:32 avtar Info <5156>: Backup #75 timestamp 2015-11-18 00:24:43, 4,007,032 files, 1,974,043 folders, 1,589 GB (2,680 files, 419.4 MB, 0.03% new) 

Для наборов данных с низким соотношением файлов к папкам может быть полезно настроить параметр avtar "--maxopendirs" на значение по умолчанию 100.

Параметр "maxopendirs" определяет, сколько каталогов avtar может быть открыт одновременно, и помогает avtar работать более эффективно. При соответствующей настройке производительность резервного копирования может увеличиться со скоростью копирования файлов в час. Компромиссом обычно является небольшое увеличение использования памяти клиентом Avamar. 

Следующие выдержки из журналов получены от того же клиента, из того же набора данных без каких-либо других изменений, кроме «maxopendirs».

Мы видим, что по мере увеличения "maxopendirs" со 100 до 1000 avtar потребляет больше памяти и достигает более высокой производительности резервного копирования файлов в час.
 

maxopendirs=<по умолчанию>

• • Пиковое использование памяти avtar = 492 Мбайт

2015-11-08 09:30:19 avtar Info <5156>: Backup #38 timestamp 2015-11-08 09:21:48, 3,995,129 files, 1,965,847 folders, 1,671 GB (172 files, 32.25 MB, 0.00% new)
2015-11-08 09:30:20 avtar Info <6083>: Backed-up 1,671 GB in 659.14 minutes: 152 GB/hour (363,668 files/hour)

maxopendirs=200

• • Пиковое использование памяти avtar = 526 МБ

2015-11-12 09:32:47 avtar Info <5156>: Backup #54 timestamp 2015-11-12 09:23:31, 3,998,280 files, 1,969,137 folders, 1,546 GB (4,121 files, 688.2 MB, 0.04% new)
2015-11-12 09:32:47 avtar Info <6083>: Backed-up 1,546 GB in 667.61 minutes: 139 GB/hour (359,336 files/hour)

maxopendirs=800

• • Пиковое использование памяти avtar = 605 МБ

2015-11-14 07:45:58 avtar Info <5156>: Backup #62 timestamp 2015-11-14 07:36:24, 4,003,390 files, 1,971,781 folders, 1,561 GB (3,816 files, 645.8 MB, 0.04% new)
2015-11-14 07:45:58 avtar Info <6083>: Backed-up 1,561 GB in 559.08 minutes: 168 GB/hour (429,638 files/hour)

maxopendirs=1000

• • Пиковое использование памяти avtar = 597 МБ (доступно меньше точек выборки из-за более быстрого резервного копирования)

2015-11-18 00:34:32 avtar Info <5156>: Backup #75 timestamp 2015-11-18 00:24:43, 4,007,032 files, 1,974,043 folders, 1,589 GB (2,680 files, 419.4 MB, 0.03% new)
2015-11-18 00:34:32 avtar Info <6083>: Backed-up 1,589 GB in 144.70 minutes: 659 GB/hour (1,661,482 files/hour)