Avamar: ddrmaint 서비스가 다운되어 잘못된 토큰 오류와 함께 백업이 실패함

관찰된 백업 실패 표시기

DDR(Data Domain Replicator) 토큰 문제로 인해 백업 프로세스가 실패하면 다음과 같은 증상이 기록됩니다.

• Avamar 로그는 유효하지 않은 토큰과 여러 오류 코드의 사용을 보고합니다.
• 백업 실패 및 누락 ddr_files.xml 파일에 정의된 대로 사용하는 것이 중요합니다.
• 치명적인 서버 연결 문제로 인해 초기화할 수 없습니다.
• 명령 실행은 서버와의 연결을 설정할 수 없음을 나타내는 종료 코드 10008과 함께 종료됩니다.

  019-05-27 20:09:30 avtar Error <41439>: Using invalid token:5ba93c9db0cff93f52b521d7420e43f6eda2784f
  2019-05-27 20:09:30 avtar Error <10542>: Data Domain server "datadomain_123.com" open failed DDR result code: 4904, desc: Invalid API argument.
  2019-05-27 20:09:30 avtar Error <10509>: Problem logging into the DDR server:'', only GSAN communication was enabled.
  2019-05-27 20:09:30 avtar FATAL <17964>: Backup is incomplete because file "/ddr_files.xml" is missing
  2019-05-27 20:09:30 avtar Info <10642>: DDR errors caused the backup to not be posted, errors=0, fatals=0
  2019-05-27 20:09:30 avtar Info <12530>: Backup was not committed to the DDR.
  2019-05-27 20:09:30 avtar FATAL <8941>: Fatal server connection problem, aborting initialization. Verify correct server address and login credentials.
  2019-05-27 20:09:30 avtar Info <6149>: Error summary: 5 errors: 41439, 10542, 8941, 10509, 17964
  2019-05-27 20:09:30 avtar Info <8468>: Sending wrapup message to parent
  2019-05-27 20:09:31 avtar Info <5314>: Command failed (5 errors, exit code 10008: cannot establish connection with server (possible network or DNS failure))

• 이제 DDR_GET_AUTH_TOKEN 에서 ddrmaint.log 출력을 반환하지 않습니다.

  grep -i  DDR_GET_AUTH_TOKEN  /usr/local/avamar/var/ddrmaintlogs/ddrmaint.log*

• dpnctl 상태는 ddrmaint-service 다운되었습니다. 

  dpnctl status output showing ddrmaint-service down
  admin@avamar123:~/>: dpnctl status
  Identity added: /home/admin/.ssh/admin_key (/home/admin/.ssh/admin_key)
  dpnctl: INFO: Avamar server status: up
  dpnctl: INFO: MCS status: up.
  dpnctl: INFO: emt status: up.
  dpnctl: INFO: Backup scheduler status: up.
  dpnctl: INFO: Maintenance windows scheduler status: enabled.
  dpnctl: INFO: Unattended startup status: disabled.
  dpnctl: INFO: avinstaller status: up.
  dpnctl: INFO: ConnectEMC status: up.
  dpnctl: INFO: ddrmaint-service status: down.
  dpnctl: INFO: [see log file "/usr/local/avamar/var/log/dpnctl.log"]

백업 작업이 실패하는 이유는 ddrmaint-service 의 Avamar Server가 실행되고 있지 않습니다. 이 서비스가 중단되면 Avamar Client가 유효한 DDR 인증 토큰을 가져올 수 없어 백업에 실패하는 오류가 연쇄적으로 발생합니다.

주요 기여 요인

• 이 dpnctl 출력은 ddrmaint-service 다운되었습니다.
• Data Domain 서버에 대한 인증이 실패하고 "유효하지 않은 토큰" 오류가 발생합니다.
• 필요한 파일 /ddr_files.xml 가 생성되지 않아 백업이 불완전하게 됩니다.
• 후속 DDR 오류로 인해 백업이 게시되거나 커밋되지 않습니다.

관련 로그 증거

2019-05-27 20:09:30 avtar Error <41439>: Using invalid token:5ba93c9db0cff93f52b521d7420e43f6eda2784f
2019-05-27 20:09:30 avtar Error <10542>: Data Domain server "datadomain_123.com" open failed DDR result code: 4904, desc: Invalid API argument.
2019-05-27 20:09:30 avtar Error <10509>: Problem logging into the DDR server:'', only GSAN communication was enabled.
2019-05-27 20:09:30 avtar FATAL <17964>: Backup is incomplete because file "/ddr_files.xml" is missing
2019-05-27 20:09:30 avtar FATAL <8941>: Fatal server connection problem, aborting initialization. Verify correct server address and login credentials.

서비스 상태 확인

admin@avamar123:~/> dpnctl status
dpnctl: INFO: Avamar server status: up
dpnctl: INFO: MCS status: up.
dpnctl: INFO: emt status: up.
dpnctl: INFO: Backup scheduler status: up.
dpnctl: INFO: Maintenance windows scheduler status: enabled.
dpnctl: INFO: Unattended startup status: disabled.
dpnctl: INFO: avinstaller status: up.
dpnctl: INFO: ConnectEMC status: up.
dpnctl: INFO: ddrmaint-service status: down.
dpnctl: INFO: [see log file "/usr/local/avamar/var/log/dpnctl.log"]

 DDR 유지 보수 서비스를 재시작합니다.

단계별 절차

1. 관리자 권한이 있는 계정으로 Avamar Server에 로그인합니다.
2. 의 현재 상태를 확인합니다. ddrmaint-service 다운되었는지 확인합니다.

   # Verify service status
   $ dpnctl status | grep ddrmaint-service
   ddrmaint-service status: down

3. 서비스를 시작합니다.

   # Start the DDR maintenance service
   $ dpnctl start ddrmaint-service

4. 서비스가 현재 실행 중인지 확인합니다.

   # Re‑check status to ensure it is up
   $ dpnctl status | grep ddrmaint-service
   ddrmaint-service status: up

5. " 없이 백업이 완료되는지 확인합니다.invalid token" 오류.
   1. 테스트 백업을 실행하거나 예약된 다음 백업이 완료될 때까지 기다립니다.
   2. Avamar 로그에 다음과 같은 오류가 없는지 검사합니다. 41439 , 10542 , 10509 , 17964 또는 8941 파일의 무결성을 확인합니다.

      # Example of a successful backup log snippet
      2024-01-30 02:15:12 avtar Info <10642>: Backup completed successfully.
      2024-01-30 02:15:12 avtar Info <12530>: Backup was committed to the DDR.

   3. 파일이 /ddr_files.xml 백업이 완료된 후 표시됩니다.