PowerVault ME5: Managementschnittstelle ist nicht zugänglich oder reagiert nicht

Management-Controller (MC) und Storage-Controller (SC) sind auf Arrays der ME-Serie separate Subsysteme. Das Array stellt weiterhin I/O bereit, jedoch reagiert keine der Managementschnittstellen (UI, SSH, seriell, SNMP oder REST API).

Typische Symptome:

• Auf die PowerVault Manager-Benutzeroberfläche kann nicht zugegriffen werden.
• Es kann keine SSH-Sitzung zu einer oder beiden Managementschnittstellen geöffnet werden.
• Es ist keine Anmeldung beim CLI-Port für serielle Sitzungen möglich.
• Das Array reagiert nicht auf externe Managementanwendungen (SNMP oder REST API) oder ist aus diesen verschwunden.

Wenn die Ereignisprotokolle anschließend überprüft werden, finden Sie weitere Informationen in den folgenden Lösungsschritten. AdministratorInnen wird möglicherweise der folgende Eintrag im Ereignisverlaufsprotokoll angezeigt, obwohl kein Firmwareupgrade durchgeführt wird.

...
B849       2023-08-08 01:08:16  152   WARNING        The Storage Controller is not receiving data from the Management Controller. (This is normal during firmware update.)
...

Wenn nicht genügend Arbeitsspeicher vorhanden ist, werden die Prozesse der Managementanwendung beendet. Dies tritt möglicherweise häufiger in Umgebungen auf, in denen externe Managementanwendungen die Managementschnittstellen über SNMP oder die REST API abfragen.

ME5-Versionshinweise:
FMW-65056: Behebt eine Bedingung, die dazu führen kann, dass CLI und Benutzeroberfläche nicht reagieren.

Welche Systeme können betroffen sein?

1. Versuchen Sie, wenn möglich, eine SSH-Sitzung oder alternativ eine serielle USB-Verbindung zu allen Controller-Managementschnittstellen herzustellen und die Management-Controller-Dienste neu zu starten. Wenn dies erfolgreich ist, aktualisieren Sie die Controller-Firmware.
2. In Fällen, in denen es nicht möglich ist, sich über SSH oder serielles USB anzumelden, ist es erforderlich, eines der betroffenen Controller-Module physisch neu einzusetzen und sobald die Managementsteuerung auf diesem Controller wiedererlangt wurde, den Peer-Controller neu zu starten. Bei einem Array mit einem einzelnen Controller-Modul oder Konfigurationen mit Hosts ohne Pfadredundanz ist es notwendig, ein Wartungsfenster einzurichten, die Hosts herunterzufahren und dann das Array auszuschalten.
3. Sobald der Managementzugriff auf beide Controller-Module wiederhergestellt ist, aktualisieren Sie die Firmware des Controller-Moduls auf Version ME5.1.2.1.0 oder höher.

Verfahren:

Schritt 1: Versuchen Sie, die Managementdienste auf beiden Controllern neu zu starten.

• Dieser Schritt ist möglicherweise nicht in allen Situationen möglich. Der Neustart des Management-Controllers hat keine Auswirkungen auf die Produktion.
• Mit diesem Schritt wird die Managementsitzung beendet und der Managementzugriff wird nach etwa zwei oder drei Minuten wiederhergestellt, wenn die Dienste neu gestartet werden.
• Wenn die Managementdienste auf beiden Controller-Modulen erfolgreich neu gestartet werden können, fahren Sie mit Schritt 3 fort: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

1. Öffnen Sie eine SSH-Sitzung zu den Managementschnittstellen jedes Controllers und melden Sie sich als NutzerIn auf Management- oder Administratorebene an. Alternativ kann ein/e AdministratorIn es mit einer seriellen USB-Verbindung zu jedem Controller versuchen. Wenn es nicht möglich ist, sich über SSH oder eine serielle Verbindung anzumelden, fahren Sie mit Schritt 2 fort: Setzen Sie ein Controller-Modul physisch neu ein oder schalten Sie das Array aus.

2. Wenn die Anmeldung erfolgreich ist, starten Sie jeden Management-Controller mit dem folgenden Befehl neu:

   restart mc full
   
   # restart mc full
   During the restart process you will briefly lose communication with the specified Management Controller(s).
   Do you want to continue? (y/n) y
   
   Info: Restarting the local MC (A)...
   Success: Command completed successfully. (2023-08-24 05:34:01)
   # Killed

Schritt 2: Setzen Sie ein Controller-Modul physisch neu ein oder schalten Sie das Array aus.

Szenario 1: Zwei Controller mit redundanter Hostpfadkonfiguration
Diese Schritte können ohne ein Wartungsfenster implementiert werden.

Folgende Bedingungen müssen erfüllt sein:

• Hosts müssen über einen Verbindungspfad zu Controller A und B verfügen.
• Auf Hosts muss Multipath-Unterstützung konfiguriert und aktiviert sein.
• Alle Hostinitiatoren müssen Volumes zugeordnet sein.

Weitere Informationen finden Sie im Abschnitt Entfernen und Austauschen von Modulen > Vom Kunden austauschbare Einheiten im Benutzerhandbuch für Storage-Systeme der Dell PowerVault ME5-Serie.

1. Ziehen Sie das Controller-Modul B in seinem Steckplatz physisch um etwa fünf Zentimeter nach vorne und setzen Sie das Controller-Modul nach 30 Sekunden wieder ein.

2. Warten Sie etwa zwei bis drei Minuten, bis Controller B den Startvorgang und das Laden der Firmware abgeschlossen hat.

3. Öffnen Sie eine SSH-Sitzung zur Management-IP-Adresse von Controller B und melden Sie sich als NutzerIn auf Management- oder Administratorebene an.

4. Starten Sie den Peer-Storage-Controller A neu. Geben Sie den folgenden Befehl ein:

   restart sc a
   
   # restart sc a  While a Storage Controller is restarting, communication will temporarily be lost with the corresponding Management Controller, and also may cause a temporary loss of data availability. Do you want to continue? (y/n) y Success: Command completed successfully. - The command to restart SC A completed successfully. The controller will restart in approximately 30 seconds. (2023-08-24 07:08:39)

5. Sobald der Peer-Controller online ist, melden Sie sich beim PowerVault Manager an und fahren Sie mit Schritt 3 fort: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

Szenario 2: Ein Controller-Modul oder nicht redundante Hostpfadkonfiguration
Ein Wartungsfenster ist erforderlich. Das unerwartete Entfernen des einzigen Pfads zu den Daten bedeutet, dass der Host den Zugriff auf Daten verliert und nicht mehr reagiert.

Weitere Informationen finden Sie im Abschnitt Entfernen und Austauschen von Modulen > Vom Kunden austauschbare Einheiten im Benutzerhandbuch für Storage-Systeme der Dell PowerVault ME5-Serie.

1. Benachrichtigen Sie die NutzerInnen über den Ausfall und befolgen Sie das Benutzerhandbuch des Hostbetriebssystems, um den verbundenen Host in den Wartungsmodus zu versetzen oder Hosts herunterzufahren.

2. Schalten Sie an der Array-Rückseite beide Netzteile ca. 60 Sekunden lang aus, bevor Sie sie wieder einschalten.

3. Warten Sie etwa drei Minuten, bis die Controller den Startvorgang abgeschlossen und die Firmware geladen haben.

4. Melden Sie sich beim PowerVault Manager an und fahren Sie mit Schritt 3 fort: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

Schritt 3: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

Weitere Informationen finden Sie im Abschnitt Aktualisieren der Systemfirmware im Administratorhandbuch für die Dell PowerVault ME5-Serie.

• Laden Sie das Controller-Firmwareupdate herunter. Öffnen Sie Dell Support in einem Webbrowser.
• Geben Sie die PowerVault ME-Service-Tag-Nummer ein oder wählen Sie das PowerVault ME-Modell aus.
• Wählen Sie unter Dokumentation die Versionshinweise für das Dell PowerVault ME5-Storage-System aus.
• Laden Sie auf der Registerkarte Treiber und Downloads die Firmware für Storage-Controller der Dell PowerVault ME5-Serie herunter.
• Extrahieren Sie die Firmware-Binärdatei aus der ZIP-Datei.
• In Dell PowerVault Manager: Gehen Sie zu Wartung > Firmware > System und laden Sie die Firmware-Binärdatei hoch.
• Gehen Sie zu Wartung > Firmware > System und klicken Sie auf den Link Diese Version aktivieren, um das Dialogfeld anzuzeigen.
• Folgen Sie den Bildschirmanweisungen, um die Aktivierung zu starten.

Verhalten nach dem Upgrade:

Bei der ME5-Controller-Firmwareversion ME5.1.2.0.1 oder höher erhalten AdministratorInnen gelegentlich die folgende Informationswarnmeldung.

Abbildung 1: Informationswarnmeldung

The Management Controller entered a memory exhaustion state and will reboot to recover. Data access will not be interrupted.

Der Management-Controller (MC) stellt die Management-UI und CLI-Schnittstelle zur Überwachung und Konfiguration des Systems bereit. Durch das Neustarten der Managementdienste werden die Controller nicht neu gestartet oder die I/O unterbrochen. Der Neustart hat zur Folge, dass zwei Minuten lang nicht auf die Managementschnittstelle zugegriffen werden kann. Wenn Sie diese Informationswarnmeldung häufiger erhalten, sind möglicherweise weitere Untersuchungen erforderlich, um die Ursache zu ermitteln.