Avamar: Avamar에서 가비지 컬렉션 실패를 확인하는 단계

가비지 컬렉션이란 무엇입니까?

GC(Garbage Collection)는 만료된 백업에서 사용되지 않은 청크를 삭제하는 프로세스입니다. 이렇게 하면 Avamar Server의 용량이 확보됩니다.

기본적으로 가비지 컬렉션은 유지 보수 기간이 시작될 때부터 하루에 한 번 실행됩니다.

일반적인 오류 증상:

• MSG_ERR_DDR_ERROR
• MSG_ERR_DISKFULL
• MSG_ERR_MISC
• MSG_ERR_TRYAGAINLATER
• MSG_ERR_BADTIMESYNC

GC 오류의 일반적인 원인:

• 다음과 같이 GC가 실패할 수 있는 근본적인 문제가 많이 있습니다. MSG_ERR_DDR_ERROR에 관한 자세한 내용을 참조하십시오. 이러한 이유 중 일부는 다음과 같습니다.
  • 네트워크 또는 연결 오류
  • Data Domain 파일 시스템 관련 문제
  • Data Domain 어플라이언스가 가득 차게 됩니다.
  • 만료되었거나 잘못된 DD Boost 사용자 비밀번호
  • 체크포인트(Avamar) 또는 스냅샷(Data Domain)이 너무 많습니다. 이것은 일반적으로 다음과 결합됩니다. hfscheck 이전 체크포인트 및 스냅샷을 "롤오프"할 수 없는 오류입니다.

• Avamar v.7부터는 백업을 가비지 컬렉션과 동시에 실행할 수 있습니다.
• 백업에서 새 데이터가 추가될 때 "인덱스 스트라이프 분할"이라는 프로세스가 발생하는 경우가 있습니다.
• 가비지 수집이 실행되는 동안에는 이 "인덱스 스트라이프 분할" 프로세스를 실행할 수 없으므로 위의 오류 중 하나가 보고됩니다.
  • 그리드의 인덱스 스트라이프는 다양한 노드에서 서로 동일한 기간에 분할되는 경향이 있습니다.
  • 경우에 따라 이 작업을 완료하는 데 며칠이 걸릴 수 있습니다.
  • Avamar가 정상적으로 작동하고 있습니다. 해결 방법은 GC 중에 백업을 실행하지 않는 것입니다.

• 이는 드문 문제이며 다중 노드 그리드에서만 볼 수 있습니다. 이 오류는 하나 이상의 Avamar Data 노드와 유틸리티 노드 간에 시간이 동기화되지 않을 때 발생합니다.
• 모든 유지 관리 작업(GC, 체크포인트 및 hfscheck) 동일한 오류를보고하고 있습니다. 

가장 최근의 가비지 컬렉션 상태 확인:

가장 최근의 가비지 컬렉션에 대한 정보는 CLI, AUI 또는 MCS(Management Console Server) UI를 사용하여 볼 수 있습니다.

CLI에서 다음을 수행합니다.

• Avamar Server에 대한 SSH 세션(예: putty)을 열고 'admin'으로 로그인합니다. 다음 명령을 실행합니다.

status.dpn
avmaint gcstatus

• 다음 예제에서는 성공적인 가비지 수집을 보여 줍니다.

Last GC: finished Tue Jul  9 00:00:23 2024 after 00m 03s >> recovered 199.88 KB (OK)
Last GC: finished Wed Jun  5 09:20:46 2024 after 00m 12s >> recovered 0.00 KB (OK)

• 상태가 (OK) 이외의 것으로 표시되면 가비지 수집에 잠재적인 문제가 있는 것입니다.

Last GC: finished Mon Jun 17 09:02:41 2024 after 01m 51s >> recovered 14.98 MB (MSG_ERR_DDR_ERROR)
Last GC: finished Thu Jun 13 07:06:54 2024 after 03m 41s >> recovered 0.00 KB (MSG_ERR_DISKFULL)
Last GC: finished Mon Jun 10 19:04:58 2024 after 01m 01s >> recovered 0 KB (MSG_ERR_MISC)
Last GC: finished Thu Jun  16:21:12 2024 after 00m 25s >> recovered 0 KB (MSG_ERR_BADTIMESYNC)

AUI에서 다음을 수행합니다.

• "마지막 가비지 수집 상태"를 검토합니다. 상태가 (정상 ) 이외의 상태로 표시되면 가비지 컬렉션에 잠재적인 문제가 있는 것입니다.

MCS UI에서 다음을 수행합니다.

• 위와 같이 "마지막 가비지 컬렉션"에 빨간색 "x" 가 있는 경우 가비지 컬렉션에 잠재적인 문제가 있으며 추가 분석이 필요합니다.

진짜 문제(위의 단계를 사용하여 검증됨)로 인해 가비지 컬렉션이 계속 실패하는 경우 알림 응답 양식에서 적절한 옵션을 선택하여 서비스 요청을 지원 에이전트로 전송합니다.

문제가 해결된 후 오류 확인:

CLI에서 다음을 수행합니다.

1. 다음을 실행하여 확인되지 않은 이벤트를 찾습니다.

mccli event show --unack

2. 고유 ID를 입력하여 단일 코드 또는 모든 오류 코드를 확인합니다.

mccli event show --id-

AUI에서 다음을 수행합니다.

1. AUI에 로그인하고 대시보드를 확인합니다. 

2. 느낌표를 클릭하면 화면에 다음과 유사한 내용이 표시됩니다.

3. Unacknowledged 이벤트를 클릭하면 화면에 다음과 유사한 내용이 표시됩니다.

4. 이벤트를 선택하고(위 그림 참조) 승인을 클릭합니다.

GC가 실패한 기간 확인:

GC가 얼마나 오래 실패했는지 확인하는 가장 쉬운 방법은 CLI를 사용하는 것입니다(이 정보는 AUI 및 MCS UI에서도 사용 가능).

다음 명령은 지난 30일 동안의 모든 가비지 컬렉션 실패를 보여줍니다.

dumpmaintlogs --types=gc --days=30 |grep "failed garbage collection"

2024/05/27-16:32:18.55893 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/05/28-16:32:37.92920 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/05/29-16:31:51.62962 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/05/30-16:31:55.18969 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR
2024/06/20-01:19:09.97961 {0.0} <4202> failed garbage collection with error MSG_ERR_DDR_ERROR