Avamar: Stappen voor het valideren van fouten bij het verzamelen van afval op Avamar

Wat is een afvalinzameling?

Garbage Collection (GC) is het proces van het verwijderen van ongebruikte brokken uit verlopen back-ups. Hierdoor komt capaciteit vrij op de Avamar-server.

Afvalinzameling wordt standaard eenmaal per dag uitgevoerd, te beginnen aan het begin van het onderhoudsvenster.

Veelvoorkomende storingssymptomen:

• MSG_ERR_DDR_ERROR
• MSG_ERR_DISKFULL
• MSG_ERR_MISC
• MSG_ERR_TRYAGAINLATER
• MSG_ERR_BADTIMESYNC

Veelvoorkomende oorzaken van GC-fouten:

• Er zijn veel onderliggende problemen die ervoor kunnen zorgen dat GC mislukt met MSG_ERR_DDR_ERROR. Enkele van deze redenen zijn:
  • Netwerk- of verbindingsfouten
  • Problemen met het Data Domain-bestandssysteem
  • De Data Domain-appliance raakt vol
  • Een verlopen of onjuist DD Boost-gebruikerswachtwoord
  • Er zijn te veel controlepunten (Avamar) of snapshots (Data Domain). Dit gaat meestal gepaard met hfscheck Fouten waardoor oude controlepunten en snapshots niet kunnen worden 'uitgerold'.

• Vanaf Avamar v.7 kunnen back-ups gelijktijdig met garbage collection worden uitgevoerd.
• Soms vindt er een proces genaamd "Index Stripe Splitting" plaats wanneer nieuwe data worden toegevoegd vanuit back-ups.
• Aangezien dit proces "Index Stripe Splitting" niet kan worden uitgevoerd terwijl garbage collection wordt uitgevoerd, wordt een van de bovenstaande fouten gemeld.
  • Indexstrepen op een raster hebben de neiging om zich rond dezelfde tijdsperiode te splitsen als elkaar op de verschillende knooppunten.
  • Soms kan dit een paar dagen in beslag nemen.
  • Avamar werkt naar behoren. De tijdelijke oplossing is om geen back-ups uit te voeren tijdens GC.

• Dit is een zeldzaam probleem en wordt alleen waargenomen op rasters met meerdere knooppunten. De fout treedt op wanneer de tijd niet wordt gesynchroniseerd tussen een of meer Avamar-dataknooppunten en het hulpprogrammaknooppunt.
• Het is waarschijnlijk dat alle onderhoudstaken (GC, checkpoint en hfscheck) dezelfde fout melden. 

De meest recente garbage collection status bepalen:

Informatie over de meest recente garbage collection kan worden bekeken met behulp van de CLI, AUI of Management Console Server (MCS) UI.

In de CLI:

• Open een SSH-sessie (bijvoorbeeld putty) op Avamar Server en log in als 'admin'. Voer de volgende opdrachten uit:

status.dpn
avmaint gcstatus

• De volgende voorbeelden tonen een geslaagde garbage collection:

Last GC: finished Tue Jul  9 00:00:23 2024 after 00m 03s >> recovered 199.88 KB (OK)
Last GC: finished Wed Jun  5 09:20:46 2024 after 00m 12s >> recovered 0.00 KB (OK)

• Als de status iets anders dan (OK) laat zien, is er mogelijk een probleem met garbage collection:

Last GC: finished Mon Jun 17 09:02:41 2024 after 01m 51s >> recovered 14.98 MB (MSG_ERR_DDR_ERROR)
Last GC: finished Thu Jun 13 07:06:54 2024 after 03m 41s >> recovered 0.00 KB (MSG_ERR_DISKFULL)
Last GC: finished Mon Jun 10 19:04:58 2024 after 01m 01s >> recovered 0 KB (MSG_ERR_MISC)
Last GC: finished Thu Jun  16:21:12 2024 after 00m 25s >> recovered 0 KB (MSG_ERR_BADTIMESYNC)

Van de AUI:

• Controleer de 'Last Garbage collection status'. Als de status iets anders dan (OK) weergeeft, is er mogelijk een probleem met garbage collection.

In de MCS-UI:

• Als de "Last Garbage collection" een rode "x" heeft, zoals hierboven weergegeven, is er mogelijk een probleem met garbage collection en is verdere analyse vereist.

Als garbage collection blijft mislukken vanwege een reëel probleem (zoals gevalideerd met behulp van de bovenstaande stappen), selecteert u de juiste opties in het waarschuwingsresponsformulier om de serviceaanvraag over te dragen aan een supportmedewerker.

Fouten bevestigen nadat het probleem is opgelost:

In de CLI:

1. Zoek de niet-bevestigde gebeurtenissen door het volgende uit te voeren:

mccli event show --unack

2. Bevestig ofwel de enkele code door de unieke ID in te voeren, ofwel alle foutcodes:

mccli event show --id-

Van de AUI:

1. Log in op de AUI en bekijk het dashboard: 

2. Klik op het uitroepteken en het scherm ziet iets dat er ongeveer als volgt uitziet:

3. Klik op de Niet-bevestigde gebeurtenissen en het scherm ziet er ongeveer als volgt:

4. Selecteer de gebeurtenis (zoals hierboven weergegeven) en klik op Bevestigen.

Bepalen hoe lang de GC al faalt:

De eenvoudigste manier om te bepalen hoe lang GC heeft gefaald, is door de CLI te gebruiken (hoewel deze informatie ook beschikbaar is in zowel de AUI- als de MCS-UI)

De volgende opdracht toont alle garbage collection-fouten van de afgelopen 30 dagen:

dumpmaintlogs --types=gc --days=30 |grep "failed garbage collection"

2024/05/27-16:32:18.55893 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/05/28-16:32:37.92920 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/05/29-16:31:51.62962 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/05/30-16:31:55.18969 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/06/20-01:19:09.97961 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR