PowerProtect Data Protection、IDPA：Rapid Upgrade ChecKer Utilityに障害が表示される

2

POST /versions

PTAgentが実行していないため、FWバージョンのクエリーに失敗しました（またはPTAとiSM/iDRACが使用できません）。

9001

Failed to connect to PTAgent.

Failed to connect to PTAgent.Check PTAgent status or IP connection.

3

POST /versions

iSMが実行されていないため、FWバージョンのクエリーに失敗しました。

注：iSMが停止すると、PTAgentがPOST /host/swinventoryやPOST /host/lcなどの一部のREST要求を処理するために最大3分かかる場合があります。

9002

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).Check iSM/iDRAC status.

4

POST /versions

iDRACの準備が整っていないため、FWバージョンのクエリーに失敗しました。

9003

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY).

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY).Check iDRAC/iSM status.

5

POST /precheck

PTAgentが実行していないため、FWバージョンのクエリーに失敗しました（またはPTAとiSM/iDRACが使用できません）。

9004

Failed to connect to PTAgent.

Failed to connect to PTAgent.Check PTAgent status or IP connection.

6

POST /precheck

iSMが実行されていないため、FWの事前チェックに失敗しました。

注：iSMが停止すると、PTAgentがPOST /host/swinventoryやPOST /host/lcなどの一部のREST要求を処理するために最大3分かかる場合があります。

9005

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).Check iSM/iDRAC status.

7

POST /precheck

iDRACの準備が整っていないため、FWの事前チェックに失敗しました。

9006

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY).

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY).Check iDRAC/iSM status.

8

POST/readinesscheck

iSMが実行していないため（またはPTAおよびiSM/iDRACが使用できないため）、ReadinessCheckに失敗しました。

なし

Failed to connect to PTAgent.

Failed to connect to PTAgent.Check PTAgent status or IP connection.

9

POST /readinesscheck

iSMが実行していないため（またはiSMとiDRACが使用できないため）、ReadinessCheckに失敗しました。

なし

Failed to query host summary from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to query host summary from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).Check iSM/iDRAC status."

Failed to query host summary from Node Event Service (HttpStatus.SERVICE_UNAVAILABLE).Check iSM/iDRAC status."

10

POST /readinesscheck

iDRACの準備が整っていないため、ReadinessCheckが失敗しました。

なし

Failed to query host summary from PTAgent (HttpStatus.BAD_GATEWAY).

Failed to query host summary from PTAgent (HttpStatus.BAD_GATEWAY).Check iDRAC/iSM status.

Failed to query host summary from Node Event Service (HttpStatus.BAD_GATEWAY).Check iDRAC/iSM status.

11

POST /readinesscheck

iDRACがリカバリー モードであるため、ReadinessCheckが失敗しました。

なし

Lifecycle Controller is in recovery mode.

Lifecycle Controller is in recovery mode.Clear the recovery mode before FW update.

12

POST /readinesscheck

iDRACジョブ キューに保留中のジョブがいくつか存在するため、ReadinessCheckに失敗しました。

なし

There are some pending jobs in the iDRAC job queue.

There are some pending jobs in the iDRAC job queue.Clear iDRAC job queue before FW update

13

POST /update

GET /activities/{id}
(> IDPA 2.4のみ)

FWアップデート ジョブが0%のダウンロードでスタックし、後続のタスクが失敗します。

9012

Failed to unpack firmware payload.

Failed to unpack firmware payload.Check if the iDRAC LC job queue is clear.

14

POST /update

GET /activities/{id}

PTAgentが実行されていないため、FWのアップデートに失敗しました。

9013

Failed to connect to PTAgent.

Failed to connect to PTAgent.Check PTAgent status or IP connection.

15

POST /update

GET /activities/{id}
(> IDPA 2.4のみ)

iSMが実行されていないため、FWのアップデートに失敗しました。

注：iSMが停止すると、PTAgentが一部のREST要求を処理するのに最大3分かかる場合があります。この場合、タイムアウト エラーが返されることがあります。

9014

Failed to process firmware payload with PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to process firmware payload with PTAgent (HttpStatus.SERVICE_UNAVAILABLE).Check iSM/iDRAC status.

16

POST /update

GET /activities/{id}

iDRACの準備が整っていないため、FWのアップデートに失敗しました。

9015

Failed to process firmware payload with PTAgent (HttpStatus.BAD_GATEWAY).

Failed to process firmware payload with PTAgent (HttpStatus.BAD_GATEWAY).Check iDRAC/iSM status.

17

GET /precheck

「No FW profile found」エラーによりFWの事前チェックに失敗しました。

9017

<IDPAモデル>のFWプロファイルが見つかりません。

No FW profile found <IDPA model>.Ensure that the correct ID Module is installed.

POST /postupdate

GET /activities/{id}

POST /postupdate

GET /activities/{id}

POST /preupdate

GET /activities/{id}

POST /preupdate

GET /activities/{id}

内部エラーのため、前提条件タスクの実行に失敗しました。

POST /update

GET /activities/{id}

FWペイロード ファイルが見つかりません。Add the firmware payload path to the request body and then retry the FW update API.

POST /update

GET /activities/{id}

内部エラーのため、ファームウェアのアップデートに失敗しました。Check PTAgent/iSM/iDRAC status and review logs for details.

POST /preupdate

GET /activities/{id}

POST /postupdate

GET /activities/{id}

PTAgentが実行されていないため、更新後タスクの実行に失敗しました。

POST /postupdate

GET /activities/{id}

内部エラーのため、更新後タスクの実行に失敗しました。

REST APIの応答を待つ間にタイムアウトする。

POST /postupdate

GET /activities/{id}

ESXi host failed to exit maintenance mode.Check ESXi host status and ensure vSAN is in a healthy state.

POST /postupdate

GET /activities/{id}

Timeout while waiting for host up and running
Check ESXi host status and ensure vSAN is in a healthy state.

POST /update

GET /activities/{id}

The maximum wait time for system reset is exceeded.Check iDRAC and PTAgent status.

Failed to verify if the current firmware is valid. 

POST /update

GET /activities/{id}

POST /readinesscheck

iSMが実行していないため（またはPTAおよびiSM/iDRACが使用できないため）、ReadinessCheckに失敗しました。

なし

PTAgent is not available and active now.

PTAgent is not available and active now.Check PTAgent Service status or IP connection.

POST /readinesscheck

iSMが実行されていない（またはサービスが縮退しているか無効になっている）ため、ReadinessCheckに失敗しました。

なし

The cached response with Node Event Service is disabled.

Node Event Service is in a degraded state, iDRAC Service Module is not available or active now.

複数の既知の問題:

「 219231 Integrated Data Protection Appliance: 「The Cached Response With Node Event Service Is Disabled.ルート169.254.0.1の重複が原因で、ノード イベント サービスが縮退しています 

詳細については199266記事「 IDPAおよびPowerProtect DPシリーズ アプライアンス: iSMサービスがiDRACで実行されていないと表示され、再起動後に起動しない場合がある。PowerProtect DP Rapid Upgradeチェッカー ユーティリティーがfirmware_readinessチェックで失敗する（英語）」

PowerProtect Data Protection Appliances, IDPAの記事197174:「PowerProtect Data Protection Rapid Upgrade Checkerがファームウェア アップグレード事前チェックの失敗を報告しました

記事「219233 Integrated Data Protection Appliance:  キャッシュされた応答 Degraded ESXi /tmp folder full 

1. ESXiホストにSSH接続し、次のコマンドを実行してPTAgent rest_ip構成を修正します。

• /opt/dell/DellPTAgent/tools/pta_cfg set rest_ip=https://<host_internal_IP>:8086

• /etc/init.d/DellPTAgent status

• /etc/init.d/DellPTAgent start

• /etc/init.d/DellPTAgent restart

2. 今後の事前チェック エラーを回避するには、すべてのESXiホストにログインし、PTAgentサービスのステータスを手動で確認します。Dell PTAgentサービスがダウンしている場合は、手動で開始します。

1. iSMの問題が発生したESXiホストにログインします。
2. 次のコマンドを実行します。
   1. /etc/init.d/dcism-netmon-watchdog status

1. 2. /etc/init.d/dcism-netmon-watchdog start 

1. コマンド「ssh root@<iDRAC-IP-Address>」を使用してACM CLIからiDRACにSSHで接続します(iDRAC IPアドレスを取得するには、次のコマンドを使用できます。 enum_instances OMC_IPMIIPProtocolEndpoint root/cimv2 | grep IPv4Address)をリロードします。
2. 次のコマンドを実行します。 racadm jobqueue delete -i JID_CLEARALL_FORCE
3. iDRACが落ち着くまで5分待ちます。

Example:

racadm>>racadm jobqueue delete -i JID_CLEARALL_FORCE
RAC1032: JID_CLEARALL_FORCE job was canceled by the user.
racadm>> 

iDRAC UIでiSMが「Not running (TLS error)」と表示される場合は、次の回避策を適用します。

1. iSMの問題が発生したESXiホストにログインします。
2. 次のコマンドを実行します。
   1. /etc/init.d/dcism-netmon-watchdog stop
   2. /etc/init.d/dcism-netmon-watchdog start install

1. iSMの問題が発生したESXiホストにログインします。
2. 次のコマンドを実行します。
   1. /etc/init.d/dcism-netmon-watchdog status 

2. 2. /etc/init.d/dcism-netmon-watchdog stop
3. /etc/init.d/dcism-netmon-watchdog start

再起動には最大5分かかる場合があります。

4. iDRACのリセット
   1. 次のコマンドを使用して、ACM CLIからiDRACにSSHで接続します ssh root@<iDRAC-IP-Address> (iDRAC IPアドレスを取得するには、次のコマンドを使用できます。 enum_instances OMC_IPMIIPProtocolEndpoint root/cimv2 | grep IPv4Address
   2. 次のコマンドを実行します。 racadm racreset soft

1. ACMにSSH接続します。
2. dpatoolsバージョン2.3.0以降がすでにインストールされているかどうかを確認します。

• これを確認するには、次のコマンドを実行します。 rpm -qa | grep dpatools

3. ファームウェア バンドル「IDPA-10.308-10.308.tar.gz」がすでに「/usr/local/dpatools/bin/payload」で利用可能かどうかを確認します。
4. 次のコマンドを実行します。 dpacli -fwupdate /usr/local/dpatools/bin/payload/IDPA-10.308-10.308.tar.gz -skipReboot

このコマンドが完了すると、iDRACバージョン3.36.103.36がノードにインストールされます。

5. アップグレードUIのRevalidateボタンをクリックして、アップグレードの事前チェックを再度実行します。

この障害の考えられる原因の1つは、ESXiホストで一部のクライアント タスク スクリプトが欠落していることです。
これは、再イメージ化プロセス中にESXiホストの電源が入れ直されていない場合に発生する可能性があります。
これを確認して修正するには、次の手順に従います。

1. ESXiホストにSSH接続します
2. に存在するファイルのリストを「」に書き留めます。/scratch/dell/extern' フォルダにあります。
3. ACMにSSH接続します。
4. に存在するファイルのリストを「」に書き留めます。/usr/local/dpatools/bin/clienttask' フォルダにあります。
5. ACMのフォルダーのすべてのファイルがESXiのフォルダーに存在しない場合は、SCPを使用してファイルをESXiホストにコピーします。
6. アップグレードUIからアップグレードを再試行します。
7. 問題が解決しない場合は、サポートにお問い合わせください。

この障害のもう1つの原因として、dpatools-serviceが正しくアップグレードされていないことが考えられます。

dpatools-serviceのバージョンを確認するには、次の手順に従います。

1. ACMにSSH接続します。
2. dpatools-serviceターゲット バージョンがすでにインストールされているかどうかを確認します。 

              rpm -qa | grep dpatools-service

 ESXiおよびファームウェアの実行中に障害が発生した場合は、最新のDPAToolsを適用し、次の手順に従って問題を回避します。

1.  DPATools CLIコマンドを実行して、すべてのホストでファームウェアをアップデートします。 

dpacli -fwworkflow /usr/local/dpatools/bin/payload/IDPA-<version>-<version>.tar.gz

2. アップグレードUIからUpgrade Syncを実行します。
3. 問題が解決しない場合は、サポートにお問い合わせください。

この障害の原因の1つとして、PM1735 NVMe FWまたはPCIeライザーに問題があることが考えられます。

デフォルトでは、PTAgentは自動デバイス スキャンを実行し、ストレージ デバイスのプロパティをキャッシュします。
スロット#4のNVMe PM1735カードからのデータ照会に問題があるため、PTAgentがhwInventoryでコンポーネント「PhysicalDisk」を検出できませんでした。

この問題を解決するには、次の回避策を適用できます。

1. NVMe/PCIe 1735ファームウェアを2.3.0にアップグレードします（NVMe 1735ドライブの場合、V2.0.2以降にアップグレードできます）。
   1. Dellサポート製品ページ サイトから14G FW 2021-December-Blockをダウンロードします。 
   2. パッケージを解凍すると、内容に 1735 FW Express-Flash-PCIe-SSD_Firmware_RP8RC_WN64_2.3.0_A03.EXE.
   3. ACMで次のコマンドを実行して、アプライアンスでサービス モードを有効にします：  dpacli -servicemode
   4. iDRACを使用してNVMe 1735 FWを2.3.0に手動でアップデートします。 
   5. ファームウェア アップデートをコミットするために、アプライアンスの電源を入れ直します。 

2. 上記の手順が機能せず、問題が解決しない場合は、電源オフのリサイクル シーケンスを試みます。
   1. ACMで、次のコマンドを実行してアプライアンスのサービス モードを有効にします： dpacli -servicemode
   2. 電源を切ります
   3. 電源ケーブルを抜きます。
   4. モニターの電源ボタンを10秒間押します。
   5. 電源ケーブルを差し込みます。
   6. 電源を入れます
3. 上記の手順1と2で問題が解決しない場合は、スロットまたはライザーに問題がある可能性があります。
   1. PCIeライザーを交換してください。