Data Domain:アラート - IOモジュールに障害が発生しました |EVT-環境-00029
Summary: Data Domain (DD)システムは、PCIe I/Oモジュール(SLICまたはPCIカードとも呼ばれる)に障害が発生した場合、または取り外された場合に、「I/Oモジュールに障害が発生しました」というメッセージとともにアラートEVT-ENVIRONMENT-00029を生成します。影響を受けるカード タイプには、SAS、NIC、NVRAM、FIBRE CHANNEL(FC)が含まれます。 ...
Symptoms
このKB記事はPCIeデバイスに適用されます。トラステッド プラットフォーム モジュール(TPM)に対しても同じアラートが生成される場合があります。
TPMの失敗については、KB記事 Data Domain:アラート:ENVIRONMENT-00029:TPM I/Oモジュールに障害が発生しました」を参照してください。
I/Oカード(SAS、NIC、NVRAM、FCなど)の障害または取り外しを行うと、対象のカードとの通信が失われます。
- PCIeデバイスのホットスワップはサポートされていません。PCIeデバイスを取り付け直すには、DDシステムの電源をオフにする必要があります。
- ホットスワップにより、予期しないシステム再起動がトリガーされます。
アラートの例:
Alert Id: 147
Event Id: EVT-ENVIRONMENT-00029
Event Message: I/O module has failed
Object: Enclosure=1:Slot=7
Additional Information: Cause=A hardware fault occurredCause
PCIe I/Oモジュール(SLICまたはPCIカード)は、ハードウェアの故障により物理的に故障したか、システムの実行中にスロットから取り外されました。
場合によっては、ファームウェアの不具合などの一時的なイベントによって、このアラートが生成される一時的なカード リセットがトリガーされることがあります。
Resolution
手順1 - 影響を受けるカードのステータスを確認する
- SSH(DDCLI)を使用してDDシステムに接続します。
- Dell Diagnostics(診断)プログラム
system show hardwareハードウェアインベントリを表示するコマンド。 - 出力を確認します。空、故障した、または取り外されたカードは、次のように表示されます
(empty)そのスロットで:
例:
sysadmin@DD# system show hardware
Slot Vendor Device Ports
---- ------ ------------------------------- --------------
M QLogic QL41000 4x 10GBase-T (NDC) Ma, Mb, Mc, Md
1 QLogic QL41164 4x 10GbE SFP+ 1a, 1b, 1c, 1d
2 EMC NVRAM 16GB Card
3 EMC PMC Quad Port 12 Gbps SAS 3a, 3b, 3c, 3d
4 Intel Intel QuickAssist Adapter 8970
5 EMC Quad Port 16 Gbps Fibre Channel 5a, 5b, 5c, 5d
6 QLogic QL41000 2x 25GbE 6a, 6b
7 (empty) (empty)
8 QLogic QL41000 2x 25GbE 8a, 8b
---- ------ ------------------------------- --------------
この例では、スロット 7 を (empty)を、そのスロットのカードが故障したためです。
- すべてのスロットが装着されていない場合は、現在の出力を以前の自動サポート レポートと比較して、欠落しているカードを特定します。
手順 2 - アラートが一時的なものであるかどうかを確認します
このアラートは一時的なものである可能性があります。ファームウェア イベントによってカードのリセットがトリガーされた後など、システムが自動的にカードを正常にリカバリーする場合もあります。
ほとんどの一時的な例では、ポストされたアラートは自動的にクリアされ、追加のアクションは必要ありません。
- 再実行
system show hardware数分後。 - カードが出力に再表示され、通常の動作を再開した場合、アラートは一時的なものです。アラートをクリアし、システムの再発を監視します。
- カードが故障した状態または
(empty)状態:- 手順4、5、6を使用して、ハードウェア障害に対処します。
ステップ 3 - 有効な起訴を確認してクリアします
ハードウェア障害が発生すると、DDシステムによって影響を受けるコンポーネントに対する起訴状が作成されることがあります。アクティブな起訴により、特定の操作が妨げられたり、追加のアラートがトリガーされたりする場合があります。
障害が発生したI/Oモジュールに関連する障害を確認してクリアします。
- Dell Diagnostics(診断)プログラム
# system indict listコマンドを実行して、システム上のすべてのアクティブな起訴を一覧表示します。 - 出力を確認し、障害が発生したI/Oモジュールに関連する兆候を特定します(アラートのエンクロージャとスロットの情報を一致させます)。
- 次のコマンドを実行して、関連する各起訴状を削除します。
<indict-id#>をindictment ID出力から:# system indict remove <indict-id#> - 再実行
system indict list起訴状が正常に削除されたことを確認します。カードが故障したままの場合、手順4 に進みます。(empty)になります。
メモ: 根本原因を確認した後、または関連するリカバリー アクションを完了した後にのみ、起訴をクリアしてください。起訴を取り下げても、根本的なハードウェアの問題は解決しません。
手順4 - システムを再起動してリカバリーを試みる
- 次のコマンドを実行してDDシステムを再起動します。
# system rebootコマンドをSSH経由で実行します。 - システムが再起動したら、次を実行します。
system show hardwareカードが回復したかどうかを確認します。 - カードが検出され、正常に機能している場合は、アラートをクリアします(
# alert clear <alert-id>)、起訴をクリアし(ステップ3に従って)、再発を監視し続けます。 - カードがまだ
(empty)または失敗した場合は、手順5に進みます。
手順5 - カードを抜き差しするか、取り付け直します
カードを誤って取り外した場合、間違ったスロットに取り付けた場合、または抜き差しする必要がある場合は、次の手順を実行します。
- 次のコマンドを実行して、DDシステムの電源をオフにします。
# system poweroffコマンドをSSH経由で実行します。 - I/Oカードを正しいスロットに取り付け直します(または取り付け直します)。
- システムの電源を入れなおします。
- 実行
system show hardwareをクリックして、カードが検出されたことを確認します。 - 実行
system indict list起訴状が残っていないことを確認するため。を使用して古い起訴状を削除します。system indict remove <indict-id#> - それでもカードが表示または機能しない場合は、手順6に進みます。
手順6 - テクニカル サポートにお問い合わせください
上記の手順を実行してもカードが障害状態のままの場合は、カードに障害が発生している可能性があります。
Dellサポート プロバイダーに連絡して障害を調査し、修理または交換を手配してください。
サービス リクエストを迅速に処理するには、手順1から5が完了したことを確認してから、新しい サポート バンドル を生成してSRに添付します。