Data Domain: Warnung – IO-Modul ausgefallen | EVT-UMWELT-00029
Summary: Ein Data Domain-System (DD) erzeugt die Warnmeldung EVT-ENVIRONMENT-00029 mit der Meldung "I/O-Modul ist ausgefallen", wenn ein PCIe-I/O-Modul (auch als SLIC oder PCI-Karte bezeichnet) ausfällt oder entfernt wird. Zu den betroffenen Kartentypen zählen SAS, NIC, NVRAM und Fibre Channel (FC). ...
Symptoms
Dieser Wissensdatenbank-Artikel bezieht sich auf PCIe-Geräte. Dieselbe Warnmeldung kann auch für ein Trusted Platform Module (TPM) erzeugt werden.
Informationen zu fehlgeschlagenen TPMs finden Sie im Wissensdatenbankartikel Data Domain: Alert: ENVIRONMENT-00029: TPM I/O Module Has Failed.
Der Ausfall oder das Entfernen einer I/O-Karte (z. B. SAS, NIC, NVRAM, FC) führt zum Verlust der Kommunikation mit der betroffenen Karte.
- Hot-Swap von PCIe-Geräten wird NICHT unterstützt. Das DD-System MUSS ausgeschaltet werden, um ein PCIe-Gerät neu einzusetzen oder zu installieren.
- Hot-Swapping löst einen unerwarteten Systemneustart aus.
Beispiel für eine Warnmeldung:
Alert Id: 147
Event Id: EVT-ENVIRONMENT-00029
Event Message: I/O module has failed
Object: Enclosure=1:Slot=7
Additional Information: Cause=A hardware fault occurredCause
Ein PCIe-I/O-Modul (SLIC oder PCI-Karte) ist entweder aufgrund eines Hardwarefehlers physisch ausgefallen oder wurde aus seinem Steckplatz entfernt, während das System ausgeführt wurde.
In einigen Fällen kann ein vorübergehendes Ereignis wie ein Firmwarefehler ein temporäres Zurücksetzen der Karte auslösen, wodurch auch diese Warnmeldung erzeugt wird.
Resolution
Schritt 1: Bestätigen Sie den Status der betroffenen Karte.
- Stellen Sie über SSH (DDCLI) eine Verbindung zum DD-System her.
- Führen Sie die Datei
system show hardware, um die Hardwarebestandsaufnahme anzuzeigen. - Überprüfen Sie die Ausgabe. Eine fehlgeschlagene oder entfernte Karte wird angezeigt als
(empty)Im Steckplatz:
Beispiel:
sysadmin@DD# system show hardware
Slot Vendor Device Ports
---- ------ ------------------------------- --------------
M QLogic QL41000 4x 10GBase-T (NDC) Ma, Mb, Mc, Md
1 QLogic QL41164 4x 10GbE SFP+ 1a, 1b, 1c, 1d
2 EMC NVRAM 16GB Card
3 EMC PMC Quad Port 12 Gbps SAS 3a, 3b, 3c, 3d
4 Intel Intel QuickAssist Adapter 8970
5 EMC Quad Port 16 Gbps Fibre Channel 5a, 5b, 5c, 5d
6 QLogic QL41000 2x 25GbE 6a, 6b
7 (empty) (empty)
8 QLogic QL41000 2x 25GbE 8a, 8b
---- ------ ------------------------------- --------------
Dieses Beispiel zeigt Steckplatz 7 als (empty), da die Karte in diesem Steckplatz ausgefallen war.
- Wenn nicht alle Steckplätze bestückt sind, vergleichen Sie die aktuelle Ausgabe mit einem früheren Auto-Support-Bericht, um die fehlende Karte zu identifizieren.
Schritt 2: Prüfen, ob die Warnmeldung vorübergehend
istDiese Warnmeldung kann vorübergehend sein. In einigen Fällen stellt das System die Karte erfolgreich selbst wieder her, z. B. nachdem ein Kartenreset durch ein Firmware-Ereignis ausgelöst wurde.
In den meisten vorübergehenden Beispielen löscht sich die veröffentlichte Warnmeldung von selbst und es sind keine weiteren Maßnahmen erforderlich.
- Führen Sie es erneut aus
system show hardwarenach ein paar Minuten. - Wenn die Karte in der Ausgabe wieder angezeigt wird und den normalen Betrieb wieder aufnimmt, war die Warnung vorübergehend. Löschen Sie die Warnmeldung und überwachen Sie das System auf Wiederholungen.
- Wenn die Karte in einem fehlerhaften oder
(empty)-Zustand, fahren Sie mit Schritt 3 fort.
Schritt 3 - Überprüfung und Löschung aktiver Anklagen
Ein Hardwarefehler kann dazu führen, dass das DD-System eine Anklage gegen die betroffene Komponente erstellt. Aktive Anklagen können bestimmte Vorgänge verhindern oder zusätzliche Alarme auslösen.
Überprüfen Sie, ob Anklagen im Zusammenhang mit dem fehlerhaften I/O-Modul erhoben wurden, und löschen Sie sie.
- Führen Sie die Datei
# system indict listBefehl zum Auflisten aller aktiven Anklageschriften im System: - Überprüfen Sie die Ausgabe und identifizieren Sie alle Anklagen, die sich auf das ausgefallene I/O-Modul beziehen (stimmen Sie mit den Gehäuse- und Steckplatzinformationen aus der Warnmeldung überein).
- Entfernen Sie jede relevante Anklageschrift, indem Sie den folgenden Befehl ausführen und Folgendes ersetzen:
<indict-id#>mit demindictment IDAus der Ausgabe:# system indict remove <indict-id#> - Führen Sie es erneut aus
system indict listum zu bestätigen, dass die Anklageschrift erfolgreich entfernt wurde. Fahren Sie mit Schritt 4 fort, wenn sich die Karte weiterhin in einem fehlerhaften oder(empty)Zustand.
Hinweis: Löschen Sie Anklageschriften erst, nachdem Sie die Ursache bestätigt oder die zugehörige Wiederherstellungsaktion abgeschlossen haben. Durch das Entfernen einer Anklageschrift wird das zugrunde liegende Hardwareproblem nicht gelöst.
Schritt 4: Recovery-Versuch durch Neustart des Systems
- Starten Sie das DD-System neu, indem Sie den Befehl
# system reboot-Befehl über SSH. - Führen Sie nach dem Neustart des Systems Folgendes aus
system show hardware, um zu überprüfen, ob die Karte wiederhergestellt wurde. - Wenn die Karte erkannt wird und normal funktioniert, löschen Sie die Warnmeldung (
# alert clear <alert-id>), die Anklageschriften (gemäß Schritt 3) löschen und weiterhin auf Wiederholungen überwachen. - Wenn die Karte weiterhin als
(empty)oder fehlgeschlagen ist, fahren Sie mit Schritt 5 fort.
Schritt 5: Setzen Sie die Karte
neu ein oder installieren Sie sie neuWenn die Karte versehentlich entfernt oder im falschen Steckplatz eingesetzt wurde oder neu eingesetzt werden muss:
- Schalten Sie das DD-System aus, indem Sie den Befehl
# system poweroff-Befehl über SSH. - Setzen Sie die I/O-Karte wieder in den richtigen Steckplatz ein (oder setzen Sie sie neu ein).
- Schalten Sie das System wieder ein.
- Ausführen
system show hardware, um zu bestätigen, dass die Karte erkannt wurde. - Ausführen
system indict listum zu überprüfen, dass keine Anklagepunkte übrig bleiben. Entfernen Sie veraltete Anklagepunkte mitsystem indict remove <indict-id#> - Wenn die Karte weiterhin nicht angezeigt wird oder nicht funktioniert, fahren Sie mit Schritt 6 fort.
Schritt 6: Wenden Sie sich an den technischen Support
Wenn die Karte nach Durchführung der obigen Schritte in einem fehlerhaften Zustand verbleibt, ist die Karte wahrscheinlich defekt.
Wenden Sie sich an Ihren Dell Supportanbieter, um den Fehler zu untersuchen und eine Reparatur oder einen Ersatz zu vereinbaren.
Um Ihren Service-Request zu beschleunigen, bestätigen Sie, dass die Schritte 1 bis 5 abgeschlossen sind, generieren Sie dann ein neues Support-Bundle und hängen Sie es an den SR an.