Data Domain: Client-Sicherheitsscan beeinträchtigt Systemleistung
Summary: Skripte und Anwendungen für Sicherheitsscans können erhebliche Auswirkungen auf die Performance des Data Domain-Systems haben.
Symptoms
Diese Vorgänge können manchmal um ein Vielfaches länger als gewöhnlich dauern, zumindest für einen Teil der Workload. Andere mögliche Symptome sind unten aufgeführt.
Übermäßige readdir Aktivität
Sicherheitstools, die Verzeichnisse wiederholt auflisten oder durchsuchen, lösen eine große Anzahl von readdir Operationen. Dies führt zu Konflikten in den Ebenen des Dateimanagers und des Verzeichnismanagers.
Zu den Indikatoren gehören:
- Ein starker Anstieg der täglichen
readdir(z. B. von ~1 Million pro Tag bis zu Dutzenden oder Hunderten von Millionen). - Erhöhten
readdirThread-Aktivität (wie in,nfsproc3_readdir_3_svc) enthalten. - Erhöhte Latenz bei Dateisystemvorgängen.
- Beispiel: Ein starker Anstieg der
readdirOperationen. AreaddirDer Vorgang ist das Ergebnis einer Clientanforderung zum Lesen eines Verzeichnisses. Zwei Beispiele hierfür sind ein Client, auf dem der Befehl 'ls' (list directory contents) oder einen 'find' (Suche nach Dateien in einer Verzeichnishierarchie). VielereaddirThreads verursachen Konflikte in der Dateimanager- und Verzeichnismanagerebene.- Die aktive
readdirDie Anzahl kann in einer Dateisystem-Threadliste gefunden werden (suchen Sie nach "nfsproc3_readdir_3_svc") oder durch die Durchsicht der täglichenreaddirAnzahl in AutoSupport gefunden. Im FolgendenreaddirStatistiken stieg die Gesamtzahl der Operationen von etwa 1 MillionreaddirOperationen pro Tag auf 70 Millionen pro Tag.FM API histograms: op type mean std-dev <1ms <10ms <100ms <1s <10s <100s >100s total max min autosupport.6: readdir 3.415ms 18.469ms 12580518 31919253 1638591 135685 3749 1 0 46277797 10306.395 0.014 autosupport.5: readdir 3.459ms 18.829ms 12763092 32553822 1696951 141236 4027 1 0 47159129 10306.395 0.014 autosupport.4: readdir 3.434ms 18.627ms 13082191 33663810 1723265 143462 4051 1 0 48616780 10306.395 0.014 autosupport.3: readdir 15.599ms 33.340ms 13312985 36148759 14982367 1910057 4179 1 0 66358348 10306.395 0.014 autosupport.2: readdir 24.991ms 35.316ms 13609833 46780191 57380779 4995642 4588 1 0 122771034 10306.395 0.014 autosupport.1: readdir 27.739ms 37.025ms 13876217 69875224 107391735 9361188 5661 1 0 200510026 10306.395 0.014 autosupport: readdir 30.935ms 43.488ms 14379002 92945802 158095969 16689520 16549 1 0 282126843 10306.395 0.014
- Die aktive
- Beispiel: Ein starker Anstieg der
Übermäßige Lesestreams
Sicherheitsscans können Tausende von Lesestreams erstellen, die die unterstützten Betriebsgrenzen weit überschreiten.
Beispiel (system show performance customer-view streams):
-
- Anzahl der Lesestreams, die die unterstützten Grenzwerte weit überschreitet. Im Folgenden wird "
system show performance customer-view streams' betragen die Lesestreams zeitweise über 4.000.-------------------------------------------------------------------------- Time Stamp |Streams | | read write read+ write+ repl-in repl-out| Date Time | seq/rand seq/rand | YYYY-MM-DD HH:MM:SS| # # # # # #| -------------------------------------------------------------------------- 2022-02-06 02:29:00 2144/0 261/2 0 0 0 0 2022-02-06 02:39:00 3521/0 229/2 0 0 0 0 2022-02-06 02:49:00 3840/0 266/2 0 0 0 0 2022-02-06 02:59:00 2935/0 271/2 0 0 0 0 2022-02-06 03:09:00 3091/0 258/2 0 0 0 0 2022-02-06 03:19:00 1492/0 294/2 0 0 0 0 2022-02-06 03:29:00 3380/0 274/2 0 0 0 0 2022-02-06 03:39:00 4449/0 252/1 0 0 0 0 2022-02-06 03:49:00 4454/0 247/1 0 0 0 0 2022-02-06 03:59:00 1480/0 236/2 0 0 0 0
- Anzahl der Lesestreams, die die unterstützten Grenzwerte weit überschreitet. Im Folgenden wird "
Lange RPCs und Dateisystem-Timeouts
Umfangreiche Scans können eine anhaltende Last erzeugen, die zu langsamen oder stockenden RPC-Vorgängen und allgemeinen Verzögerungen im Dateisystem führt.
Cause
Wenn diese Tools auf ein Data Domain-System abzielen, führen sie zu einer kontinuierlichen Verzeichnisdurchlauf- und Leseaktivität, die das Dateisystem überlastet und eine erhebliche Performanceverschlechterung verursacht.
Resolution
Schließen Sie alle Data Domain-Systeme von Sicherheitsscans, Virenscans und automatisierten Dateiprüfungsskripten aus.
Nur qualifizierte und unterstützte Anwendungen sollten auf ein Data Domain-Dateisystem zugreifen oder Workloads auf einem Data Domain-Dateisystem platzieren.