Avamar: Skräpinsamlingen misslyckas med MSG_ERR_TRYAGAINLATER
Summary: Om du startar v7.x där säkerhetskopieringar tillåts under underhållsjobbet för skräpinsamling kan meddelandet "MSG_ERR_TRYAGAINLATER" ibland visas.
Symptoms
Underhållsjobbet Avamar Garbage Collection avslutas med felet MSG_ERR_TRYAGAINLATER.
Så här verifierar du problemet:
-
status.dpnVisar:
admin@avamarhost:~/>: status.dpn ... Last GC: finished Mon Dec 23 06:08:00 2013 after 03m 05s >> recovered 0.00 KB (MSG_ERR_TRYAGAINLATER)
-
Verifiera med hjälp av
dumpmaintlogsKommandot:
admin@avamarhost:~/>: dumpmaintlogs --types=gc --days=1
...
2013/12/23-12:08:00.9673 {0.0} <4202> failed garbage collection with error MSG_ERR_TRYAGAINLATER
-
Detta kan även kontrolleras i Avamar-serverloggarna av Avamar-supporten.
Cause
Det här beteendet är förväntat, och inträffar när nya data läggs till i Avamar från säkerhetskopior.
När lagringsbehållare, eller "stripes" på Avamar, delas i två kallas det "Index Stripe Splitting".
Detta inträffar i sällsynta fall sällan och endast efter att vissa kapacitetsintervall har uppnåtts beroende på nodstorlek, antal, version osv. Den här underhållsaktiviteten kan inte utföras under GC.
Om en indexstripe delas när vissa GC-åtgärder görs avslutas GC med MSG_ERR_TRYAGAINLATER.
Om en indexstripe kör GC och den måste delas väntar den tills GC-åtgärderna har slutförts.
Indexränder i ett rutnät tenderar att delas ungefär samma tidsperiod som varandra på de olika noderna. Ibland kan detta ta några dagar att slutföra.
Resolution
Avamar fungerar som förväntat.
När delning av indexstripen är klar återupptas skräpinsamlingen.
Lösningen är att inte köra säkerhetskopieringar under GC.
Additional Information
- Det här beteendet inträffar inte i ett rutnät som är i "steady state" (har ett stabilt eller minskande kapacitetsutnyttjande) eftersom alla stripes som måste finnas redan finns.
- Detta beteende inträffar inte på ett rutnät som har blivit fullt och sedan har minskat i kapacitet (utan att ha utökats med nya noder). Det beror på att alla ränder som kan skapas i ett rutnät redan finns.
- Beteendet kan inträffa efter att en nod har lagts till och det finns ytterligare kapacitet för att dela stripes ytterligare.
- Problemet kan återkomma då och då och det är mer troligt att det uppstår i Avamar-rutnät som upplever ihållande datatillväxt eller som nyligen har utökats med ytterligare noder.
- Beteendet kan kvarstå under en följd av dagar.