PowerFlex 4.X: SMART_AGGREGATED_STATE_FAILED – DAX-Gerät – SIO03.02.0000013
Summary: PowerFlex meldet, dass eines der DAX-Geräte kurz vor dem Ausfall steht und ersetzt werden sollte. Korrigierbare NVDIMM-Speicherfehler können dazu führen, dass ein DAX-Gerät in PowerFlex als "Failed Now" angezeigt wird, obwohl das Gerät nicht wirklich ausgefallen ist. ...
Symptoms
Dieser Fehler wird in der Regel mit einem standardmäßigen PowerFlex-Gerät ausgelöst. In diesem Fall wird empfohlen, die Festplatte auszutauschen. In diesem Artikel werden jedoch zusätzliche Schritte zur Fehlerbehebung erläutert, wenn es sich bei dem fraglichen Gerät um ein DAX-Gerät handelt, das ein NVDIMM und keine Festplatte ist.
PowerFlex meldet die folgende Warnmeldung und weist darauf hin, dass eines der DAX-Geräte kurz vor dem Ausfall steht oder mit reduzierter Leistung betrieben wird. Dies spiegelt sich auch in Form eines DialHome-Alarms wider:
SIO03.02.0000013
Die Festplatte fällt möglicherweise bald aus oder arbeitet möglicherweise mit einer geringeren Leistung.
SMART_AGGREGATED_STATE_FAILED_NOW SDS.
Device.SMART_Aggregated_State_Failed_Now Empfohlene Maßnahme: Ziehen Sie in Betracht, die Festplatte auszutauschen.
Cause
PowerFlex erkennt, dass ein korrigierbarer oder nicht korrigierbarer Fehler auf einem der NVDIMMs für einen Storage Node aufgetreten ist. Sobald ein Fehler erkannt wird, wird der Fehler "Smart Aggregated State Failed Now" erzeugt.
Resolution
Durch die Bereinigung von NVDIMMs kann das Problem gelöst werden, ohne das NVDIMM auszutauschen. Ersetzen Sie NVDIMM nur, wenn das Problem nach der Bereinigung weiterhin besteht.
- Bei 15G-Nodes können Sie nur alle NVDIMMs bereinigen – Entfernen Sie alle Geräte (SDS-Gerät + DAX-Gerät), bevor Sie die Bereinigung durchführen, um eine Datenbeschädigung zu vermeiden.
- Bei 14G-Nodes können Sie nur das eine NVDIMM oder alle NVDIMMs bereinigen. Führen Sie die folgenden Schritte aus, um das fehlerhafte NVDIMM zu identifizieren
Validieren des Fehlers
Schritt 1: Navigieren Sie in PowerFlex Manager zu Block > Devices
Schritt 2: Wählen Sie oben rechts das Spaltenfeld aus und fügen Sie "S.M.A.R.T.-Zustand" zur Liste hinzu.
Schritt 3: Überprüfen Sie die Liste der Dax-Geräte und vergewissern Sie sich, dass welche vorhanden sind, die "Jetzt fehlgeschlagen" anzeigen.
Schritt 4: Bestimmen Sie für jedes dax-Gerät im Status "Failed now", welchem SDS das dax entspricht, und melden Sie sich beim iDRAC an.
Schritt 5: Stellen Sie fest, ob korrigierbare Fehler für die einzelnen NVDIMMs in den Lebenszyklusprotokollen aufgezeichnet wurden.
- Korrigierbare Speicherfehler auf NVDIMMs können dazu führen, dass ein dax-Gerät in PowerFlex "Failed Now" anzeigt, obwohl es nicht ausgefallen ist.
Schritt 6: Stellen Sie über SSH eine Verbindung zum primären MDM für den entsprechenden Cluster her und führen Sie die folgenden Befehle aus. Dies wird verwendet, um den DAX-Zustand, die Steckplatzinformationen und die SN des NVDIMM zu validieren, die Folgendes anzeigt:
- Melden Sie sich beim primären MDM mit Administratoranmeldung an. Verwenden Sie einfache Anführungszeichen, wenn das Kennwort Sonderzeichen enthält.
scli --login --username admin --password '<password>' --management_system_ip <pfmp_ip>
- Führen Sie den folgenden Befehl aus, um alle SDS-Details aufzulisten:
scli --query_all_sdsBeispiel:
SDS ID: 2e400d3800000004 Name: LAB10_SDS3 State: Connected, Joined IP: XXX
SDS ID: 2e400d3700000003 Name: LAB10_SDS2 State: Connected, Joined IP: XXX
SDS ID: 2e400d3600000002 Name: LAB10_SDS4 State: Connected, Joined IP: XXX
SDS ID: 2e400d3500000001 Name: LAB10_SDS1 State: Connected, Joined IP: XXX
SDS ID: 2e400d3400000000 Name: LAB10_SDS5 State: Connected, Joined IP: XXX
- Suchen Sie den betroffenen SDS, notieren Sie sich den SDS-Namen, führen Sie dann den folgenden Befehl aus
scli --query_sds --sds_name <sds name>- Notieren Sie sich den Gerätepfad für alle Geräte für dieses SDS. Dieser wird später verwendet, um die Geräte in Schritt 8 wieder hinzuzufügen.
- Notieren Sie sich die betroffene Geräte-ID und führen Sie dann den folgenden Befehl aus
# scli --query_sds_device_info --device_id <device_id>Ausgabebeispiel:
# scli --query_sds_device_info --device_id XXXXX
Device ID: _________ Name: /dev/dax1.0 Path: /dev/dax1.0
ScaleIO Device Configuration:
Original Path: /dev/dax1.0
Acceleration Pool: _________
Used for RFcache: no
Capacity Limit: 31.4 GB (32107 MB)
Device State: Normal
Physical Device Information:
Device Type: UNKNOWN
Media Type: NVDIMM
Auto Detected Media Type: UNKNOWN
Vendor Name: N/A
Model Name: nmem2
Serial Number: _________
Slot Number: B5
Firmware Version: N/A
Cache Look-ahead: not Active
Write Cache: not Active
ATA Security: not Active
Logical Sector Size: 0 B
Physical Sector Size: 0 B
Capacity: 0 GB
LED Setting: OFF
Background Device Scanner Information:
Scanned: 0 MB
Error Fixes: 0
Compare Errors: 0
SMART Information:
Aggregated State: FAILED_NOW
Temperature State: NEVER_FAILED
Current Value: 34 Worst Value: 34 Threshold: 0
Media Wearout Indicator State: NEVER_FAILED
Current Value: 95 Worst Value: 95 Threshold: 5
RAID Controller Information:
Serial Number: N/A
RAID vDisk Status: N/A
RAID vDisk Type: N/A
RAID vDisk Cache: N/A
Schritt 7: Nachdem Sie ermittelt haben, welches Dax dem notierten NVDIMM entspricht, befolgen Sie das Standardverfahren zum Bereinigen der NVDIMMs über den iDRAC, wenn die Fehler korrigierbar sind. Befolgen Sie die Standardrichtlinien für das NVDIMM-Troubleshooting, falls die Fehler nicht korrigierbar sind.
- Dazu müssen die Geräte aus dem SDS entfernt werden. Zur Vermeidung von Datenbeschädigungen sind die erforderlichen Schritte erforderlich. Befolgen Sie dazu die im folgenden Artikel beschriebenen Schritte
Schritt 8: Nachdem die NVDIMMs bereinigt wurden, fügen Sie die dax-Geräte wieder zum SDS und dann die PowerFlex-Geräte entsprechend dem zuvor notierten Gerätepfad hinzu. Die dax-Geräte werden als "nie fehlgeschlagen" angezeigt. Die entsprechende Warnmeldung wird ebenfalls automatisch von der Registerkarte "Alerts" gelöscht.
Überprüfen Sie die Schritte 9 und 10 in Artikel PowerFlex: Austauschen von NVDIMM in PowerEdge-Nodes der 15. Generation und höher
Additional Information
Anleitung zum Bereinigen von NVDIMMs: PowerFlex: Anleitung zum Bereinigen von NVDIMM und SDPM – Video
DialHome-Warnmeldungsempfehlungen: Empfohlene Maßnahmen für PowerFlex Top Dial Home