Домен даних: Сканування безпеки клієнта погіршує продуктивність системи
Summary: Скрипти та додатки для сканування безпеки можуть суттєво вплинути на продуктивність системи домену даних.
Symptoms
Ці операції іноді можуть займати у багато разів довше, ніж зазвичай, принаймні частину навантаження. Інші потенційні симптоми наведені нижче.
Надмірно readdir Діяльність
Інструменти безпеки, які багаторазово перелічують або шукають у каталогах, активують велику кількість каталогів readdir операції. Це викликає конфлікти на рівні файлового менеджера та менеджера каталогів.
Індикатори включають:
- Різке зростання щоденного
readdirпідрахунок (наприклад, від ~1 мільйона на день до десятків або сотень мільйонів). - Піднятий
readdirАктивність потоку (як у,nfsproc3_readdir_3_svc). - Збільшена затримка в роботах файлової системи.
- Приклад: Різке зростання
readdirоперації. AreaddirОперація є результатом запиту клієнта на читання каталогу. Два приклади цього — клієнт, який виконує 'ls' (список вмісту каталогу) команди або 'find' (пошук файлів у ієрархії каталогів). БагатоreaddirПотоки викликають конфлікти на шарах файлового менеджера та менеджера каталогів.- Активні
readdircount можна знайти у списку потоків файлової системи (шукайте "nfsproc3_readdir_3_svc») або рецензуючи щоденну газетуreaddirКількість знайдено в автопідтримці. У наведеному нижчеreaddirСтатистика, загальна кількість операцій зросла приблизно з 1 мільйонаreaddirоперації на день до 70 мільйонів на день.FM API histograms: op type mean std-dev <1ms <10ms <100ms <1s <10s <100s >100s total max min autosupport.6: readdir 3.415ms 18.469ms 12580518 31919253 1638591 135685 3749 1 0 46277797 10306.395 0.014 autosupport.5: readdir 3.459ms 18.829ms 12763092 32553822 1696951 141236 4027 1 0 47159129 10306.395 0.014 autosupport.4: readdir 3.434ms 18.627ms 13082191 33663810 1723265 143462 4051 1 0 48616780 10306.395 0.014 autosupport.3: readdir 15.599ms 33.340ms 13312985 36148759 14982367 1910057 4179 1 0 66358348 10306.395 0.014 autosupport.2: readdir 24.991ms 35.316ms 13609833 46780191 57380779 4995642 4588 1 0 122771034 10306.395 0.014 autosupport.1: readdir 27.739ms 37.025ms 13876217 69875224 107391735 9361188 5661 1 0 200510026 10306.395 0.014 autosupport: readdir 30.935ms 43.488ms 14379002 92945802 158095969 16689520 16549 1 0 282126843 10306.395 0.014
- Активні
- Приклад: Різке зростання
Надмірні потоки читання
Сканування безпеки може створювати тисячі потоків читання, значно перевищуючи підтримувані операційні ліміти.
Приклад (system show performance customer-view streams):
-
- Кількість читаних потоків значно перевищує підтримувані ліміти. У наведеному нижче '
system show performance customer-view streams' вихід, потоки читання іноді перевищують 4 000.-------------------------------------------------------------------------- Time Stamp |Streams | | read write read+ write+ repl-in repl-out| Date Time | seq/rand seq/rand | YYYY-MM-DD HH:MM:SS| # # # # # #| -------------------------------------------------------------------------- 2022-02-06 02:29:00 2144/0 261/2 0 0 0 0 2022-02-06 02:39:00 3521/0 229/2 0 0 0 0 2022-02-06 02:49:00 3840/0 266/2 0 0 0 0 2022-02-06 02:59:00 2935/0 271/2 0 0 0 0 2022-02-06 03:09:00 3091/0 258/2 0 0 0 0 2022-02-06 03:19:00 1492/0 294/2 0 0 0 0 2022-02-06 03:29:00 3380/0 274/2 0 0 0 0 2022-02-06 03:39:00 4449/0 252/1 0 0 0 0 2022-02-06 03:49:00 4454/0 247/1 0 0 0 0 2022-02-06 03:59:00 1480/0 236/2 0 0 0 0
- Кількість читаних потоків значно перевищує підтримувані ліміти. У наведеному нижче '
Довготривалі RPC та тайм-аути файлової системи
Інтенсивне сканування може створювати тривале навантаження, що призводить до повільних або зупинок роботи RPC та загальних затримок у файловій системі.
Cause
Коли ці інструменти націлені на систему домену даних, вони вводять тривалу активність обходу каталогів і читання, що перевантажує файлову систему і призводить до значного зниження продуктивності.
Resolution
Виключити всі системи домену даних із сканування безпеки, антивірусних сканувань та автоматизованих скриптів для перевірки файлів.
Лише кваліфіковані та підтримувані додатки повинні отримувати доступ або розміщувати робоче навантаження на файловій системі домену даних.