PowerVault ME5. Интерфейс управления недоступен или не отвечает

Контроллер управления (MC) и контроллер системы хранения данных (SC) — это отдельные подсистемы в массивах серии ME. Массив продолжает обслуживать операции ввода-вывода, однако все интерфейсы управления (UI, SSH, последовательный интерфейс, SNMP или REST API) не отвечают.

Типичные симптомы: 

• Пользовательский интерфейс PowerVault Manager недоступен.
• Не удается открыть сеанс SSH на одном или обоих интерфейсах управления.
• Не удается войти в порт интерфейса командной строки последовательного сеанса
• Массив не отвечает на внешние приложения для управления (SNMP или API REST) или исчез из них.

После просмотра журналов событий см. указанные ниже действия по разрешению проблемы. Администраторы могут видеть следующую запись в журнале событий, даже если обновление микропрограммы не выполняется.

...
B849       2023-08-08 01:08:16  152   WARNING        The Storage Controller is not receiving data from the Management Controller. (This is normal during firmware update.)
...

Состояние нехватки памяти приводит к завершению процессов приложения управления. Такие инциденты могут быть более частыми в средах, где внешние приложения управления опрашивают интерфейсы управления с помощью SNMP или REST API.

Примечания к выпуску ME5: 
FMW-65056: устранено условие, которое могло приводить к зависанию интерфейса командной строки и пользовательского интерфейса;

Какие системы могут быть затронуты?

1. Если возможно, попробуйте открыть сеанс SSH или, в качестве альтернативы, последовательное USB-подключение к каждому интерфейсу управления контроллером и снова запустите службы контроллера управления. Если все прошло успешно, обновите микропрограмму контроллера.
2. В случаях, когда невозможно войти в систему с помощью SSH или последовательного USB-порта, необходимо физически переустановить один из затронутых модулей контроллера, а после восстановления контроля управления на этом контроллере перезапустить его одноранговый контроллер. В массиве с одним модулем контроллера или конфигурациях с хостами без резервирования путей необходимо организовать окно обслуживания, отключить хосты, а затем выключить массив.
3. После восстановления доступа для управления обоими модулями контроллеров обновите микропрограмму модуля контроллера до версии ME5.1.2.0.1 или более поздней.

Процедура:

Шаг 1. Попытайтесь перезапустить службы управления на обоих контроллерах.

• Этот шаг может быть невозможен при любых обстоятельствах. Перезапуск контроллера управления не влияет на производительность. 
• На этом этапе сессия управления завершается, и доступ для управления восстанавливается примерно через две–три минуты после перезапуска служб.   
• Если службы управления можно успешно перезапустить на обоих модулях контроллера, перейдите к шагу 3. Обновите микропрограмму модуля контроллера до версии ME5.1.2.0.1 или более поздней. 

1. Откройте сеанс SSH для интерфейса управления каждого контроллера и войдите в систему как пользователь уровня управляющего или администратора. Кроме того, администратор может попробовать последовательное USB-подключение к каждому контроллеру. Если невозможно войти в систему с помощью SSH или последовательного соединения, перейдите к шагу 2. Физически переустановите один модуль контроллера или выключите питание дискового массива.   
2. Если вход в систему выполнен успешно, перезапустите контроллер управления на каждом из этих устройств с помощью следующей команды: 

   restart mc full
   
   # restart mc full
   During the restart process you will briefly lose communication with the specified Management Controller(s).
   Do you want to continue? (y/n) y
   
   Info: Restarting the local MC (A)...
   Success: Command completed successfully. (2023-08-24 05:34:01)
   # Killed

Шаг 2. Физически переустановите один модуль контроллера или выключите питание дискового массива. 

Сценарий 1. Двойной контроллер с резервной конфигурацией хостов пути

Эти действия можно выполнить, не требуя окна обслуживания.

Должны выполняться следующие условия:

• Хосты должны иметь путь подключения к контроллерам A и B
• Хосты должны быть настроены и активированы для поддержки нескольких путей. 
• Все инициаторы хостов должны быть сопоставлены с томами.

Инструкции см. в разделе «Извлечение и замена >заменяемых клиентом компонентов» в Руководстве пользователя системы хранения данных Dell PowerVault серии ME5.

1. Физически потяните модуль контроллера B в слоте вперед примерно на пять сантиметров или примерно на два дюйма, а затем через 30 секунд установите его на место.
2. Подождите примерно две-три минуты, пока контроллер B завершит загрузку и загрузку микропрограммы. 
3. Откройте сеанс SSH на IP-адрес управления контроллера B и войдите в систему в качестве управляющего пользователя или пользователя уровня администратора. 
4. Перезапустите одноранговый контроллер системы хранения A. Введите команду: 

   restart sc a 
   
   # restart sc a While a Storage Controller is restarting, communication will temporarily be lost with the corresponding Management Controller, and also may cause a temporary loss of data availability. Do you want to continue? (y/n) y Success: Command completed successfully. - The command to restart SC A completed successfully. The controller will restart in approximately 30 seconds. (2023-08-24 07:08:39)

5. Когда контроллер однорангового узла находится в режиме онлайн, войдите в PowerVault Manager и перейдите к шагу 3. Обновите микропрограмму модуля контроллера до версии ME5.1.2.0.1 или более поздней.

Сценарий 2. Конфигурация с одним модулем контроллера или нерезервным путем подключения к хосту

Требуется период обслуживания. Неожиданное удаление единственного пути к данным означает, что хост теряет доступ к данным и перестает отвечать!

Инструкции см. в разделе «Извлечение и замена >заменяемых клиентом компонентов » в Руководстве пользователя системы хранения данных Dell PowerVault серии ME5.

1. Уведомите пользователей о перебоях в работе и следуйте инструкциям руководства пользователя операционной системы хоста, чтобы перевести подключенный хост в режим обслуживания или выключить хост. 
2. Отключите оба блока питания на задней панели дискового массива примерно на 60 секунд, прежде чем снова их включить.
3. Подождите примерно три минуты, пока контроллеры завершат загрузку и загрузят микропрограмму.
4. Войдите в PowerVault Manager и перейдите к шагу 3. Обновите микропрограмму модуля контроллера до версии ME5.1.2.0.1 или более поздней.

Шаг 3. Обновите микропрограмму модуля контроллера до версии ME5.1.2.0.1 или более поздней.

См. раздел Обновление микропрограммы системы в Руководстве администратора Dell PowerVault серии ME5.

• Скачайте обновление микропрограммы контроллера. В браузере откройте Dell Support
• Введите сервисный код PowerVault ME или выберите модель PowerVault ME.
• В разделе Документация выберите Примечания к выпуску системы хранения данных Dell PowerVault ME5.
• На вкладке «Накопители и загружаемые материалы » скачайте микропрограмму контроллера системы хранения данных Dell PowerVault серии ME5
• Извлеките двоичный файл микропрограммы из файла .zip.
• С помощью Dell PowerVault Manager. Перейдите в раздел Обслуживание >системы микропрограмм и загрузите двоичный файл микропрограммы>.
• Перейдите в раздел Maintenance >Firmware >System и нажмите ссылку Activate this Version, чтобы открыть диалоговое окно.
• Следуйте инструкциям на экране, чтобы начать активацию.

Действия после модернизации:

При использовании микропрограммы контроллера ME5 версии ME5.1.2.0.1 или выше администраторы могут время от времени получать следующее информационное оповещение. 

Рис. 1. Информационное оповещение

The Management Controller entered a memory exhaustion state and will reboot to recover. Data access will not be interrupted.

Контроллер управления (MC) предоставляет интерфейс пользователя управления и интерфейс интерфейса командной строки для мониторинга и настройки системы. Перезапуск служб управления не приводит к перезагрузке контроллеров или прерыванию операций ввода-вывода. Перезагрузка приводит к невозможности доступа к интерфейсу управления в течение двух минут. Если вы часто получаете это информационное оповещение, может потребоваться дополнительное расследование, чтобы установить причину.