Avamar：ddrmaintサービスがダウンしているため、無効なトークン エラーが発生してバックアップが失敗する

観察されたバックアップ障害インジケーター。

Data Domain Replicator(DDR)トークンの問題が原因でバックアップ プロセスが失敗すると、次の現象が記録されます。

• Avamarログは、無効なトークンの使用と複数のエラー コードを報告します。
• バックアップが ddr_files.xml ファイルで定義）を使用することが重要です。
• 致命的なサーバー接続の問題により初期化が妨げられています。
• コマンドの実行は終了コード10008で終了し、サーバーとの接続を確立できないことを示します。

  019-05-27 20:09:30 avtar Error <41439>: Using invalid token:5ba93c9db0cff93f52b521d7420e43f6eda2784f
  2019-05-27 20:09:30 avtar Error <10542>: Data Domain server "datadomain_123.com" open failed DDR result code: 4904, desc: Invalid API argument.
  2019-05-27 20:09:30 avtar Error <10509>: Problem logging into the DDR server:'', only GSAN communication was enabled.
  2019-05-27 20:09:30 avtar FATAL <17964>: Backup is incomplete because file "/ddr_files.xml" is missing
  2019-05-27 20:09:30 avtar Info <10642>: DDR errors caused the backup to not be posted, errors=0, fatals=0
  2019-05-27 20:09:30 avtar Info <12530>: Backup was not committed to the DDR.
  2019-05-27 20:09:30 avtar FATAL <8941>: Fatal server connection problem, aborting initialization. Verify correct server address and login credentials.
  2019-05-27 20:09:30 avtar Info <6149>: Error summary: 5 errors: 41439, 10542, 8941, 10509, 17964
  2019-05-27 20:09:30 avtar Info <8468>: Sending wrapup message to parent
  2019-05-27 20:09:31 avtar Info <5314>: Command failed (5 errors, exit code 10008: cannot establish connection with server (possible network or DNS failure))

• 次に、 DDR_GET_AUTH_TOKEN インチ ddrmaint.log 出力を返しません。

  grep -i  DDR_GET_AUTH_TOKEN  /usr/local/avamar/var/ddrmaintlogs/ddrmaint.log*

• dpnctl ステータスは、 ddrmaint-service がダウンしています。 

  dpnctl status output showing ddrmaint-service down
  admin@avamar123:~/>: dpnctl status
  Identity added: /home/admin/.ssh/admin_key (/home/admin/.ssh/admin_key)
  dpnctl: INFO: Avamar server status: up
  dpnctl: INFO: MCS status: up.
  dpnctl: INFO: emt status: up.
  dpnctl: INFO: Backup scheduler status: up.
  dpnctl: INFO: Maintenance windows scheduler status: enabled.
  dpnctl: INFO: Unattended startup status: disabled.
  dpnctl: INFO: avinstaller status: up.
  dpnctl: INFO: ConnectEMC status: up.
  dpnctl: INFO: ddrmaint-service status: down.
  dpnctl: INFO: [see log file "/usr/local/avamar/var/log/dpnctl.log"]

バックアップ操作は失敗します。 ddrmaint-service Avamar Serverは実行されていません。このサービスがダウンすると、Avamar Clientは有効なDDR認証トークンを取得できず、バックアップに失敗するエラーが連鎖的に発生します。

主な要因

• 「 dpnctl 出力は、 ddrmaint-service がダウンしています。
• Data Domainサーバーへの認証が失敗し、「無効なトークン」エラーが生成されます。
• 必要なファイル /ddr_files.xml が生成されないため、バックアップが不完全になります。
• その後にDDRエラーが発生すると、バックアップのポストまたはコミットができなくなります。

関連するログ エビデンス

2019-05-27 20:09:30 avtar Error <41439>: Using invalid token:5ba93c9db0cff93f52b521d7420e43f6eda2784f
2019-05-27 20:09:30 avtar Error <10542>: Data Domain server "datadomain_123.com" open failed DDR result code: 4904, desc: Invalid API argument.
2019-05-27 20:09:30 avtar Error <10509>: Problem logging into the DDR server:'', only GSAN communication was enabled.
2019-05-27 20:09:30 avtar FATAL <17964>: Backup is incomplete because file "/ddr_files.xml" is missing
2019-05-27 20:09:30 avtar FATAL <8941>: Fatal server connection problem, aborting initialization. Verify correct server address and login credentials.

サービス ステータスの確認

admin@avamar123:~/> dpnctl status
dpnctl: INFO: Avamar server status: up
dpnctl: INFO: MCS status: up.
dpnctl: INFO: emt status: up.
dpnctl: INFO: Backup scheduler status: up.
dpnctl: INFO: Maintenance windows scheduler status: enabled.
dpnctl: INFO: Unattended startup status: disabled.
dpnctl: INFO: avinstaller status: up.
dpnctl: INFO: ConnectEMC status: up.
dpnctl: INFO: ddrmaint-service status: down.
dpnctl: INFO: [see log file "/usr/local/avamar/var/log/dpnctl.log"]

 DDRメンテナンス サービスを再起動します。

手順

1. 管理者権限を持つアカウントでAvamar Serverにログインします。
2. の現在のステータスを確認します ddrmaint-service をクリックして、ダウンしていることを確認します。

   # Verify service status
   $ dpnctl status | grep ddrmaint-service
   ddrmaint-service status: down

3. サービスを開始します。

   # Start the DDR maintenance service
   $ dpnctl start ddrmaint-service

4. サービスが実行されていることを確認します。

   # Re‑check status to ensure it is up
   $ dpnctl status | grep ddrmaint-service
   ddrmaint-service status: up

5. バックアップが完了していることを確認します。「invalid token" エラー。
   1. テスト バックアップを実行するか、次回のスケジュール設定されたバックアップが完了するまで待ちます。
   2. Avamarログを調べて、次のようなエラーがないことを確認します。 41439 、 10542 、 10509 、 17964 、または 8941 の詳細を確認してください。

      # Example of a successful backup log snippet
      2024-01-30 02:15:12 avtar Info <10642>: Backup completed successfully.
      2024-01-30 02:15:12 avtar Info <12530>: Backup was committed to the DDR.

   3. ファイル /ddr_files.xml がバックアップ完了後に存在します。