PowerFlex: Verfahren zum Aktualisieren der Firmware zur Behebung eines Problems, bei dem sich NVDIMM-Akkus in PowerFlex Rack- und Appliance-Nodes (R650, R750) entladen

Problembeschreibung

Dell PowerFlex-15G-Systeme unterstützen eine Konfiguration mit NVDIMMs, die persistenten Speicher bieten, der für die feine Granularität erforderlich ist. Dieses Verfahren enthält die Schritte zum Update des iDRAC und CPLD auf die folgenden Versionen:

• iDRAC 7.10.50.201
• CPLD 1.1.1

Download-Verzeichnis

• Nutzerdefinierter PowerFlex-Node: https://www.dell.com/support/home/de-de/product-support/product/powerflex-custom-node/drivers
  • (iDRAC und CPLD durchsuchen)

Die neue iDRAC-Version prüft die NVDIMM-Akkuzellenspannungen, wenn sie aktiviert ist. Es wird ein Fehler protokolliert, wenn die Zellenspannungen unter einem definierten Schwellenwert liegen. Es wird ein Ereignis mit dem Schweregrad „Info“ protokolliert, wenn der NVDIMM-Akku zwischen den Status READY und ENABLED wechselt.  

Das neue CPLD-Design verfolgt den Aktivierungsstatus des NVDIMM-Akkus und wechselt nach einer festgelegten Zeitspanne wieder in den Status „Ready“.

• HINWEIS: Infolge des oben genannten Problems besteht die Möglichkeit, dass der NVDIMM-Akku im System beschädigt ist und ersetzt werden muss. Diese Möglichkeit wird in diesem Verfahren berücksichtigt.
• HINWEIS: Für dieses Update des iDRAC und CPLD muss eine bestimmte Reihenfolge eingehalten werden. Die Sequenz erfordert, dass zuerst der iDRAC und danach das CPLD aktualisiert wird. Auf diese Weise lässt sich ermitteln, ob die Batterie defekt ist.

Verfahrensüberblick

Um das Problem vollständig zu beheben, ist Folgendes erforderlich:

• Identifizieren Sie alle NVDIMM-Akkus im System, die keine ausreichende Ladung aufweisen.
  • Da diese spezifische Bedingung in früheren iDRAC-Versionen nicht gemeldet wird, müssen Sie den iDRAC auf die oben angegebene Version (oder höher) aktualisieren. Diese neue Version des iDRAC meldet BAT0021- oder BAT0017-Fehler, wenn sie einen entladenen NVDIMM-Akku erkennt.
  • Aktualisieren Sie den iDRAC auf allen Nodes im System auf die angegebene Version.
• Fordern Sie für jede entladene und defekte Batterie NVDIMM-Ersatzbatterien an.
  • Führen Sie das CPLD-Update auf Nodes mit defekten NVDIMM-Batterien erst dann durch, wenn Sie die defekte Batterie ausgetauscht haben.
  • Ersatzbatterien sind möglicherweise nicht vollständig aufgeladen und es kann bis zu 75 Minuten dauern, bis sie nach der Installation vollständig aufgeladen sind.
  • Bei Nodes mit intakten NVDIMM-Akkus können Sie mit dem CPLD-Firmwareupdate fortfahren.
• Nachdem Sie die defekten Akkus ausgetauscht haben, fahren Sie mit dem Update der CPLD-Firmware über den iDRAC fort.
  • Der Node muss vor der Durchführung des Updates in den Wartungsmodus versetzt werden.
  • Der Node wird neu gestartet und führt dann das CPLD-Update durch.
• Sobald der Node nach dem CPLD-Update neu gestartet wird, nehmen Sie den Node aus dem Wartungsmodus.
• Sobald der Wartungsmodus für den Node beendet ist, wird ein Neuaufbau- und Neuausgleichsvorgang gestartet.  
  • HINWEIS: Warten Sie, bis Neuaufbau und Neuausgleich abgeschlossen sind, bevor Sie mit dem Update des nächsten Node im Cluster fortfahren.

Voraussetzungen

• Die minimale BIOS-Version für dieses CPLD-Update ist BIOS-Version 1.8.2.  (1.10.2 oder höher wird empfohlen)
• Während des Austauschs von Komponenten sind KundInnen für die folgenden Aufgaben zuständig:
  • Migration aller Nicht-PowerFlex-Anwendungen auf dem Node auf einen anderen Server.
  • Ordnungsgemäßes Herunterfahren des Servers, indem das entsprechende Verfahren zum Herunterfahren für das verwendete Betriebssystem befolgt wird.
• Sicherstellen, dass die folgenden Informationen verfügbar sind:
  • Typ des PowerFlex-Nodes: Physischer Node oder HCI-Node (VMware)
  • IP-Adressbereich, Subnetz und Gateway-IP-Adressen für den PowerFlex-Cluster und die entsprechenden Nodes.
  • Der IP-Adressbereich, das Subnetz und die Gateway-IP-Adressen für den iDRAC-Port auf dem Node (definiert während des anfänglichen Bereitstellungsprozesses)
  • Alle Root- und Administratorkennwörter, die auf dem Server und iDRAC festgelegt sind.
  • vCenter-IP-Adresse und Zugangsdaten bei HCI-Konfiguration

Detailliertes Verfahren

Schritt 1: Aktualisieren Sie den iDRAC auf allen Nodes im PowerFlex-Cluster.

Der iDRAC kann auf diesen Nodes aktualisiert werden, ohne dass die Nodes neu gestartet werden müssen. Das Verfahren zum Aktualisieren des iDRAC ist wie folgt.
Stellen Sie sicher, dass das Firmware-Image an einen bestimmten Speicherort auf dem lokalen System heruntergeladen wurde. Für dieses Verfahren wird die Firmwareversion des iDRAC benötigt. Der Download-Speicherort ist auf der ersten Seite des Verfahrens aufgeführt.
HINWEIS: Stellen Sie sicher, dass die iDRAC-Firmware auf allen Nodes im Cluster aktualisiert wurde, bevor Sie mit dem nächsten Schritt des Verfahrens fortfahren …

1. Melden Sie sich bei der iDRAC9-Weboberfläche an.
2. Gehen Sie zu Wartung und klicken Sie dann auf Systemupdate. Die Seite Manual Update wird angezeigt.
3. Wählen Sie auf der Registerkarte Manuelles Update die Option Lokal als Speicherort aus.

Abbildung 1: iDRAC9 – Updatebildschirm

4. Klicken Sie auf Datei auswählen, wählen Sie die Firmware-Image-Datei für die erforderliche Komponente aus und klicken Sie dann auf Hochladen.
5. Nachdem der Hochladevorgang abgeschlossen ist, wird im Abschnitt Updatedetails jede auf den iDRAC hochgeladene Firmwaredatei mit ihrem Status angezeigt. Wenn die Firmware-Image-Datei gültig ist und erfolgreich hochgeladen wurde, zeigt die Spalte Inhalt neben dem Dateinamen der Firmware-Image-Datei das Symbol (+) an. Erweitern Sie den Namen, um Informationen zu Gerätenamen, aktuellen und verfügbaren Firmwareversionen anzuzeigen.
6. Wählen Sie die erforderliche iDRAC-Firmwaredatei aus.
   • Für das iDRAC-Firmwareupdate ist kein Neustart des Hostsystems erforderlich. Klicken Sie auf Installieren, um das Update zu starten.

7. Zum Anzeigen der Seite der Jobwarteschlange klicken Sie auf Jobwarteschlange. Auf dieser Seite können Sie die ausstehenden Firmware-Aktualisierungen anzeigen und verwalten. Sie können auf OK klicken, um die aktuelle Seite zu aktualisieren und den Status des Firmwareupdates anzuzeigen.
8. Der Lifecycle Controller wird neu gestartet und die Verbindung zum iDRAC wird zurückgesetzt. Warten Sie einige Minuten, bevor Sie sich beim iDRAC anmelden.

Hinweis: Wenn ein Verbindungsfehler auftritt, finden Sie weitere Informationen im Wissensdatenbank-Artikel zu HTTP- und HTTPS-FQDN-Verbindungsfehlern: https://www.dell.com/support/kbdoc/en-us/000193619

Schritt 2: Überprüfen Sie, ob der Node eine defekte NVDIMM-Batterie hat.

iDRAC 7.10.50.201 und höher enthält Code, der die Ladung der NVDIMM-Akkuzellen alle 5 Sekunden überprüft und den folgenden Fehler im iDRAC-Systemereignisprotokoll (SEL) meldet, wenn die Zellenspannung unter dem Schwellenwert von 1,5 V liegt.

• “BAT0021: The NVDIMM battery has reached the end of its usable life or has failed”
• “BAT0017: The NVDIMM battery has failed.”

Wenn eine der oben genannten Meldungen angezeigt wird, weist der Node einen defekten NVDIMM-Akku auf, der ersetzt werden muss.

• HINWEIS: Führen Sie kein Update des CPLD auf einem Node mit defektem NVDIMM-Akku durch. Der Neustart während eines CPLD-Updates bleibt hängen und das NVDIMM wird aufgrund des defekten Akkus nicht aktiviert.
• HINWEIS: Fordern Sie einen NVDIMM-Ersatzakku an.

 Wenn der iDRAC kein Problem meldet, ist die Batterie auf diesem Node in Ordnung und muss nicht ausgetauscht werden. Das CPLD-Update kann auf diesem Node durchgeführt werden und Sie können mit dem nächsten Schritt fortfahren.

• HINWEIS: Speziell entwickelte PowerFlex-Systeme geben für jeden Node, der den Fehler BAT0021 meldet, eine Node-Integritätswarnung aus.  Dieses Verhalten kann verwendet werden, um fehlerhafte NVDIMM-Akkus nach dem iDRAC-Update zu identifizieren
  

• HINWEIS: Wenn das BAT0017 oder BAT0021 Ereignis angezeigt wird, aber dann ein 3. Ereignis von BAT0016, dann muss die Batterie NICHT ausgetauscht werden!
  Die NVDIMM-Technikabteilung hat empfohlen, dass bei Auftreten dieses dritten Ereignisses (BAT0016) der Akku nicht ausgetauscht werden muss.
  BAT0016    The NVDIMM battery is operating normally.
  

Wenn alle drei Akkuwarnungen (BAT0021, BAT0020, BAT0016) nacheinander in weniger als einer Minute angezeigt werden, sollte dies als Fehlalarm betrachtet werden und der Akku gilt als funktionsfähig und sollte nicht ausgetauscht werden. 

Schritt 3: Bereiten Sie den Node vor: Versetzen Sie den SDS in den Wartungsmodus.

• Wechseln Sie in den Wartungsmodus, indem Sie das entsprechende Verfahren im folgenden Abschnitt unter PowerFlex-Version 4.x oder PowerFlex-Version 3.x befolgen.
• Wählen Sie den korrekten PowerFlex-Wartungsmodus aus.
  • Wenn der Node keinen defekten NVDIMM-Akku hat, wird der Modus für sofortige Wartung (Instant Maintenance Mode, IMM) empfohlen, um das CPLD zu aktualisieren. 
    • Überspringen Sie die Schritte 4 und 5 (Austausch des Akkus) und fahren Sie mit dem Upgrade von BIOS (Schritt 6) und CPLD (Schritt 7) fort.
  • Wenn der Node einen fehlerhaften NVDIMM-Akku hat, muss er vor dem Aktualisieren des CPLD ersetzt werden.
    • In diesem Fall sollte der Node in den geschützten Wartungsmodus (Protected Maintenance Mode, PMM) versetzt werden, um den Zeitaufwand für das Aufladen des Ersatzakkus zu berücksichtigen.
• HINWEIS: Dieses Verfahren löst einen Neuausgleichsvorgang aus. Es wird daher empfohlen, für dieses Verfahren ein Wartungszeitfenster einzuplanen.
• HINWEIS: Wenn Sie den PMM vor dem Austausch des NVDIMM-Akkus (Schritte 4 bis 5) verwenden, können Sie für das BIOS- und CPLD-Update (Schritte 6 bis 7) im PMM-Wartungsmodus bleiben.

PowerFlex Version 4.x, siehe „Dell PowerFlex 4.x – Administrationshandbuch“.

• Wenn der Node als primärer MDM fungiert, führen Sie die folgenden Schritte aus, um die MDM-Eigentumsrechte zu wechseln:
  • Neukonfigurieren von MDM-Rollen
• Wenn ein SDR auf dem Node konfiguriert ist, versetzen Sie den SDR in den Wartungsmodus
  • SDR in den Wartungsmodus versetzen
• Storage Data Server (SDS) in den Wartungsmodus versetzen
  • Storage Data Server (SDS) in den Wartungsmodus versetzen
• Wenn es sich um einen HCI-Node (VMware) handelt, versetzen Sie den ESXi nach den obigen Schritten in den Wartungsmodus
  • Hosts in den Wartungsmodus versetzen

PowerFlex Version 3.x, siehe Handbuch „Upgrade von Dell PowerFlex auf v3.6.x“.

• Node in den Wartungsmodus versetzen und herunterfahren
  • Ordnungsgemäßes Herunterfahren oder Neustarten eines Node

Schritt 4: Ersetzen Sie die NVDIMM-Batterie.

Anweisungen zum Austausch des NVDIMM-Akku finden Sie in der SolVe-Dokumentation für PowerFlex-Nodes unter dem unten angegebenen Link.

SolVe (dell.com)

Laden Sie die SolVe-Dokumentation für „NVDIMM-Akku“ für den entsprechenden Node-Typ R650/R750 auf 15G herunter.
PowerFlex Custom Node > Replacement > 15G > [R650 or R750] > [PowerFlex 3.6 or 4.0] > NVDIMM battery - Linux-based

• HINWEIS: Überspringen Sie die folgenden Abschnitte in der Dokumentation „Austauschen eines NVDIMM-Akkus“.

Remove the storage devices from PowerFlex.

Gründe, warum Speichergeräte nicht entfernt werden sollten:

• Das Entfernen von Storage-Geräten während dieses Verfahrens führt zu einem unnötigen Neuaufbau des gesamten Nodes, wodurch sich der Wartungszeitraum erheblich verlängert.
• Da es sich hierbei um einen geplanten Neustart und nicht um einen Stromausfall handelt, ist das NVDIMM-Subsystem nicht auf die Stromversorgung durch Akkus angewiesen, um den Speichervorgang abzuschließen. Die Stromversorgung erfolgt über die Netzteile, auch wenn die Batterien defekt sind.
• Der Neustart führt dazu, dass das System während des Hochfahrens einen Fehler des NVDIMM-Akku meldet. Die Daten im NVDIMM wurden jedoch gespeichert und es kommt zu keinem Datenverlust.

Schritt 5: Warten Sie, bis die ausgetauschten Akkus aufgeladen sind.

Wenn Sie die NVDIMM-Batterie auf einem bestimmten Node ausgetauscht haben, schalten Sie das System ein. Das System wird nicht vollständig gestartet. Das BIOS hält an und wartet, bis die Batterien aufgeladen sind, da eine NVDIMM-Ersatzbatterie möglicherweise nicht über ausreichend Ladung verfügt, die vom System zum Schutz der Daten im NVDIMM benötigt wird. Das Aufladen der Batterien kann ca. 60 bis 75 Minuten dauern. Sie können versuchen, das System nach 60 bis 75 Minuten neu zu starten. Der Node sollte dann hochfahren und auch das NVDIMM-Subsystem aktivieren.

• HINWEIS: Planen Sie Ihr Wartungszeitfenster basierend auf 60 bis 75 Minuten für jeden Node, dessen Akku ausgetauscht werden muss.

Schritt 6: Aktualisieren Sie bei Bedarf das BIOS.

Die CPLD-Version, die zur Behebung des in diesem Wissensdatenbank-Artikel beschriebenen Problems verwendet wird, erfordert mindestens BIOS 1.8.2. (BIOS 1.10.2 oder höher wird empfohlen)
Nutzerdefinierte PowerFlex-Node-Bereitstellungen erfordern bestimmte Versionen von Treibern, BIOS und Firmware, die von Dell validiert und qualifiziert sind.
Wenn die aktuelle BIOS-Version niedriger als 1.8.2 ist, aktualisieren Sie die Firmware auf die neueste Version, wie in der Treiber- und Firmwarematrix für nutzerdefinierte PowerFlex-Nodes veröffentlicht.

1. Stellen Sie sicher, dass sich der Node im Wartungsmodus befindet. Ist dies nicht der Fall, finden Sie unter Schritt 3 weitere Anweisungen.
2. Informationen zum Herunterladen der BIOS-Version finden Sie im Abschnitt „Downloadspeicherorte“ in diesem Wissensdatenbank-Artikel.
   • Hinweis: Klicken Sie auf „Ältere Versionen“, um eine Version auszuwählen, die mit der angestrebten Matrix abgeglichen werden soll.
3. Fahren Sie mit dem Upgrade des BIOS auf Version 1.8.2 oder höher fort. 

• Dell PowerEdge-BIOS-Upgradeverfahren für 15G:  https://www.dell.com/support/kbdoc/en-us/000222827/dell-technologies-recommends-upgrading-bios-and-idrac9-for-15th-generation-poweredge-servers

Schritt 7: Aktualisieren Sie CPLD auf Version 1.1.1.

Voraussetzung:

• Stellen Sie sicher, dass sich der SDS im PowerFlex-Wartungsmodus befindet. Stellen Sie bei ESXi-Nodes sicher, dass sich ESXi auch im Wartungsmodus befindet. Ist dies nicht der Fall, finden Sie unter Schritt 3 in diesem Artikel weitere Anweisungen.
• Stellen Sie sicher, dass das CPLD-Firmware-Image auf Ihrem lokalen System verfügbar ist. Informationen zum Herunterladen der entsprechenden CPLD-Version finden Sie im Abschnitt „Downloadspeicherorte“ in diesem Artikel. 
  • Das CPLD-Update löst einen Node-Neustart aus.

Hinweis: 

• Führen Sie das CPLD-Firmwareupdate nach dem iDRAC-Firmwareupdate durch.
• Tauschen Sie den NVDIMM-Akku aus, bevor Sie mit dem CPLD-Firmwareupdate fortfahren.

Das CPLD-Updateverfahren ist wie folgt.

1. Melden Sie sich bei der iDRAC9-Weboberfläche an.
2. Gehen Sie zu Wartung und klicken Sie dann auf Systemupdate. Die Seite Manual Update wird angezeigt.
3. Wählen Sie auf der Registerkarte Manuelles Update die Option Lokal als Speicherorttyp aus.Abbildung 1: iDRAC9-Updatebildschirm
4. Klicken Sie auf Datei auswählen, wählen Sie die Firmware-Image-Datei für die erforderliche Komponente aus und klicken Sie dann auf Hochladen.
5. Nachdem der Hochladevorgang abgeschlossen ist, wird im Abschnitt Updatedetails jede auf den iDRAC hochgeladene Firmwaredatei mit ihrem Status angezeigt. Wenn die Firmware-Image-Datei gültig ist und erfolgreich hochgeladen wurde, zeigt die Spalte Inhalt neben dem Dateinamen der Firmware-Image-Datei das Symbol (+) an. Erweitern Sie den Namen, um Informationen zu Gerätenamen, aktuellen und verfügbaren Firmwareversionen anzuzeigen.
6. Wählen Sie die erforderliche CPLD-Firmwaredatei aus.
   • Für ein CPLD-Firmwareupdate ist ein Neustart des Hostsystems erforderlich. Klicken Sie auf Installieren, um das Update zu starten.

7. Zum Anzeigen der Seite der Jobwarteschlange klicken Sie auf Jobwarteschlange. Auf dieser Seite können Sie die ausstehenden Firmware-Aktualisierungen anzeigen und verwalten. Sie können auf OK klicken, um die aktuelle Seite zu aktualisieren und den Status des Firmwareupdates anzuzeigen.

Schritt 8: Nehmen Sie den Node aus dem Wartungsmodus.

PowerFlex Version 4.x, siehe „Dell PowerFlex 4.x – Administrationshandbuch“.
Voraussetzungen: Stellen Sie sicher, dass Sie über die IP-Adresse und Admin-Zugangsdaten für PowerFlex Manager verfügen. Bei Bedarf können KundInnen Ihnen die erforderlichen Informationen zur Verfügung stellen.

1. Schalten Sie den Node ein, wenn Sie dies nach dem CPLD-Update nicht bereits getan haben. Das Betriebssystem wird gestartet und alle PowerFlex-Prozesse werden automatisch gestartet.

2. Nachdem der Node hochgefahren wurde, melden Sie sich über Ihren Browser wieder als Admin-NutzerIn bei PowerFlex Manager an.

3. Klicken Sie in der Menüleiste auf Überwachen > Warnmeldungen und vergewissern Sie sich, dass für keinen SDS oder SDC-Host bzw. SDR oder SDT, sofern vorhanden, eine Verbindungstrennungsmeldung angezeigt wird.

4. Führen Sie für einen ESXi-Node die folgenden Schritte aus:
   1. Stellen Sie im vSphere Web Client sicher, dass der Node sowohl in der Ansicht „Hosts“ als auch in der Ansicht „Cluster“ als eingeschaltet und verbunden angezeigt wird.
   2. Klicken Sie mit der rechten Maustaste auf den Node und wählen Sie Wartungsmodus beenden aus.
   3. Erweitern Sie den Server und wählen Sie die Storage VM (SVM) aus. Wenn die SVM nicht automatisch eingeschaltet wird, schalten Sie sie manuell ein.
5. Beenden Sie den Wartungsmodus des SDS: 
   • Beenden des Wartungsmodus des Storage Data Server
6. Wenn ein SDR auf dem Node konfiguriert ist, nehmen Sie den SDR aus dem Wartungsmodus.
   • Beenden Sie den Wartungsmodus des SDR.

PowerFlex Version 3.x, siehe Handbuch „Upgrade von Dell PowerFlex auf v3.6.x“.
Voraussetzungen:Stellen Sie sicher, dass die Nutzerin oder der Nutzer über die folgenden Anmeldedaten verfügt (bei der Administration erhältlich): IP-Adresse oder Hostname des PowerFlex-Präsentationsservers, die für den Zugriff auf die PowerFlex-GUI verwendet werden

1. Schalten Sie den Node ein, wenn Sie dies nach dem CPLD-Update nicht bereits getan haben. Das Betriebssystem wird hochgefahren und alle PowerFlex-Prozesse werden automatisch gestartet.
2. Beenden Sie den Wartungsmodus auf dem Node: Versetzen Sie den Node in den Betriebszustand zurück
3. Wenn ein SDR auf dem Node konfiguriert ist, nehmen Sie den SDR aus dem Wartungsmodus.

Schritt 9: Fahren Sie mit dem nächsten Node im Cluster fort.

Die Sequenz der Schritte 2 bis 8 sollte für alle Nodes im Cluster nacheinander durchgeführt werden.  Sobald alle Nodes aktualisiert wurden, ist der Vorgang abgeschlossen.