PowerVault ME5: Hanteringsgränssnittet är inte tillgängligt eller svarar inte

Management Controller (MC) och Storage Controller (SC) är separata undersystem på disksystem i ME-serien. Disksystemet fortsätter att betjäna I/O, men alla hanteringsgränssnitt (UI, SSH, seriell, SNMP eller REST API) svarar inte.

Typiska symptom: 

• Användargränssnittet för PowerVault Manager är inte tillgängligt.
• Det går inte att öppna en SSH-session till ett eller båda hanteringsgränssnitten.
• Det går inte att logga in på CLI-porten för seriell session
• Disksystemet svarar inte på eller har försvunnit från externa hanteringsprogram (SNMP eller REST API).

När händelseloggarna granskas efteråt följer du lösningsstegen nedan. Administratörer kan se följande post i händelsehistorikloggen även om det inte pågår någon uppgradering av den fasta programvaran.

...
B849       2023-08-08 01:08:16  152   WARNING        The Storage Controller is not receiving data from the Management Controller. (This is normal during firmware update.)
...

Ett tillstånd som är slut på minne leder till att hanteringsprogramprocesserna avslutas. Incidenser kan vara vanligare i miljöer där externa hanteringsprogram avsöker hanteringsgränssnitten med hjälp av SNMP eller REST API.

Versionskommentarer för ME5: 
FMW-65056 Löser ett tillstånd som kan leda till att CLI och användargränssnitt inte svarar.

Vilka system kan påverkas?

1. Försök om möjligt att öppna en SSH-session eller en seriell USB-anslutning till varje styrenhetshanteringsgränssnitt och starta hanteringsstyrenhetstjänsterna igen. Om detta lyckas uppgraderar du styrenhetens fasta programvara.
2. I fall där det inte går att logga in med SSH eller seriell USB måste du fysiskt återställa en av de berörda styrenhetsmodulerna och starta om dess peer-styrenhet när hanteringskontrollen har återtagits på den här styrenheten. I ett disksystem som har en enda styrenhetsmodul eller konfigurationer som har värdar utan sökvägsredundans är det nödvändigt att ordna ett underhållsfönster, stänga av värdar och sedan stänga av disksystemet.
3. När hanteringsåtkomsten har återupprättats till båda styrenhetsmodulerna uppgraderar du styrenhetsmodulens fasta programvara till version ME5.1.2.0.1 eller senare.

Procedur:

Steg 1: Försök att starta om hanteringstjänsterna på båda styrenheterna.

• Det här steget kanske inte är möjligt under alla omständigheter. Omstart av hanteringsstyrenheten påverkar inte produktionen. 
• Det här steget avslutar hanteringssessionen och hanteringsåtkomsten återställs efter cirka två eller tre minuter när tjänsterna startas om.   
• Om hanteringstjänsterna kan startas om på båda styrenhetsmodulerna går du till steg 3: Uppgradera styrenhetsmodulens fasta programvara till ME5.1.2.0.1 eller senare. 

1. Öppna en SSH-session till varje styrenhets hanteringsgränssnitt och logga in som användare på hanterings- eller administratörsnivå. Alternativt kan en administratör försöka med USB-seriell anslutning till varje styrenhet. Om det inte går att logga in med SSH eller en seriell anslutning går du till steg 2: Sätt tillbaka en styrenhetsmodul eller stäng av disksystemet.   
2. Om inloggningen lyckas startar du om hanteringsstyrenheten på var och en med hjälp av följande kommando: 

   restart mc full
   
   # restart mc full
   During the restart process you will briefly lose communication with the specified Management Controller(s).
   Do you want to continue? (y/n) y
   
   Info: Restarting the local MC (A)...
   Success: Command completed successfully. (2023-08-24 05:34:01)
   # Killed

Steg 2: Sätt tillbaka en styrenhetsmodul eller stäng av disksystemet. 

Scenario 1: Dubbel styrenhet med redundant sökvägsvärdkonfiguration

De här stegen kan genomföras utan behov av en underhållsperiod.

Följande villkor måste vara uppfyllda:

• Värdar måste ha en anslutningssökväg till styrenhet A och B
• Värdar måste ha stöd för flera sökvägar konfigurerat och aktiverat. 
• Alla värdinitierare måste mappas till volymer.

Vägledning finns i avsnittet Borttagning och byte > av enheter som kan bytas av kund i användarhandboken för Dell PowerVault ME5-seriens lagringssystem.

1. Dra styrenhetsmodul B fysiskt framåt i platsen med cirka fem centimeter eller cirka två tum och sätt sedan tillbaka styrenhetsmodulen efter 30 sekunder.
2. Vänta cirka två eller tre minuter för styrenhet B att slutföra starten och inläsningen av den fasta programvaran. 
3. Öppna en SSH-session till styrenhetens B-hanterings-IP-adress och logga in som användare på hanterings- eller administratörsnivå. 
4. Starta om peer-lagringsstyrenheten A. Skriv kommandot: 

   restart sc a 
   
   # restart sc a While a Storage Controller is restarting, communication will temporarily be lost with the corresponding Management Controller, and also may cause a temporary loss of data availability. Do you want to continue? (y/n) y Success: Command completed successfully. - The command to restart SC A completed successfully. The controller will restart in approximately 30 seconds. (2023-08-24 07:08:39)

5. När peer-styrenheten är online loggar du in på PowerVault Manager och går till steg 3: Uppgradera styrenhetsmodulens fasta programvara till ME5.1.2.0.1 eller senare.

Scenario 2: Konfiguration av en styrenhetsmodul eller icke-redundant värdsökväg

En underhållsperiod krävs. Att oväntat ta bort den enskilda sökvägen till data innebär att värden förlorar åtkomst till data och slutar svara!

Vägledning finns i avsnittet Borttagning och byte > av enheter som kan bytas av kund i användarhandboken för Dell PowerVault ME5-seriens lagringssystem.

1. Meddela användarna om avbrottet och följ användarhandboken för värdoperativsystemet för att försätta den anslutna värden i underhållsläge eller stänga av värdar. 
2. På matrisens baksida, stäng av båda nätaggregaten i cirka 60 sekunder innan du slår på dem igen.
3. Vänta cirka tre minuter för styrenheterna att slutföra starten och läsa in den fasta programvaran.
4. Logga in på PowerVault Manager och gå till steg 3: Uppgradera styrenhetsmodulens fasta programvara till ME5.1.2.0.1 eller senare.

Steg 3: Uppgradera styrenhetsmodulens fasta programvara till ME5.1.2.0.1 eller senare.

Se avsnittet Uppdatera systemets fasta programvara i administratörshandboken för Dell PowerVault ME5-serien.

• Ladda ner uppdateringen av styrenhetens fasta programvara. Öppna Dell Support i en webbläsare
• Ange PowerVault ME-servicetaggen eller välj PowerVault ME-modellen.
• Under Dokumentation väljer du versionskommentarerna för Dell PowerVault ME5-lagringssystemet.
• På fliken Enheter och hämtningsbara filer hämtar du den fasta programvaran för lagringsstyrenheten i Dell PowerVault ME5-serien
• Packa upp binärfilen för den fasta programvaran från .zip filen.
• Använda Dell PowerVault Manager. Gå till Maintenance >Firmware >System och ladda upp den binära filen för den fasta programvaran.
• Gå till Maintenance >Firmware >System och klicka på länken Aktivera den här versionen för att visa dialogrutan.
• Följ anvisningarna på skärmen för att starta aktiveringen.

Beteende efter uppgradering:

Med fast programvara för ME5-styrenheten version ME5.1.2.0.1 eller senare kan administratörer ibland få följande informationsvarning. 

Bild 1: Varning om information

The Management Controller entered a memory exhaustion state and will reboot to recover. Data access will not be interrupted.

Styrenheten (MC) tillhandahåller hanteringsgränssnittet och CLI-gränssnittet för att övervaka och konfigurera systemet. Om du startar om hanteringstjänsterna startas inte styrenheter om eller I/O avbryts. Effekten av omstart är att det inte går att komma åt hanteringsgränssnittet under två minuter. Om du får den här informationsaviseringen ofta kan det krävas mer undersökning för att fastställa orsaken.