Идентификатор оповещения PowerStore: POWERDOCTOR_VOLUMES_IN_DESTROYING_STATE

Оповещение

                                Таблица 1. Идентификатор оповещения и связанная с ним информация

PowerStore PowerDoctor обнаружил один или несколько томов, которые застряли в Destroying Состояние Для этих томов были инициированы операции удаления, но команды удаления уже завершены (или команда удаления не существует), а тома остаются в Destroying Состояние Это означает, что тома зависли и не могут завершить процесс удаления.

При возникновении этой проблемы могут наблюдаться следующие признаки:

• Оповещение PowerDoctor: появляется оповещение о НЕЗНАЧИТЕЛЬНОЙ серьезности с сообщением: "Volumes are stuck in Destroying state. Affected volumes failed last deletes and are left in Destroying state."
• Сведения об оповещении: тома застряли в Destroying Состояние Затронутые тома не удалось удалить при последнем удалении, и они остаются в состоянии «Уничтожающаяся».
• Состояние тома: при запросе сведений о томе с помощью пользовательского интерфейса, интерфейса командной строки или API REST состояние тома отображается как Destroying Операция удаления, по-видимому, завершена или отсутствует.
• Влияние на систему хранения: зависшие тома могут продолжать потреблять емкость хранилища, а пространство для хранения данных будет невозможно освободить, пока тома не будут удалены надлежащим образом.

Том входит в Destroying Состояние, в котором инициируется операция удаления. Как правило, операция удаления завершается успешно, и том удаляется из системы. Однако в некоторых сценариях сбоя команда удаления может завершиться сбоем, пока том остается в Destroying Состояние

К распространенным корневым причинам относятся:

• Сбой команды удаления: Во время выполнения команды удаления произошла ошибка после того, как команда прошла точку отката.
• Прерванная операция удаления: Системное событие (переключение узла при отказе, перезапуск службы, модернизация) прервало операцию удаления в процессе работы.
• Проблемы массового удаления моментальных снимков: Для моментальных снимков тома, удаленных в рамках операции устаревания моментальных снимков, операция массового устаревания могла завершиться сбоем, а некоторые моментальные снимки остались.

Влияние
на системуТома застряли в Destroying имеют следующие последствия:

• Потребляемая емкость хранилища: Застрявшие тома продолжают потреблять емкость, которую невозможно освободить до тех пор, пока они не будут полностью удалены.
• Влияние модернизации (NDU): Недопустимое состояние томов может привести к сбоям предварительных проверок и помешать успешному обновлению.
• Операции управления: Не оказывает прямого влияния на операции ввода-вывода хостов, но может усложнить планирование емкости и визуализацию управления томами.
• Звуковой сигнал оповещения: Оповещение PowerDoctor будет отображаться до тех пор, пока не будет устранено это состояние.

Оповещение PowerDoctor не удаляется сразу Destroying Тома состояния удаляются. PowerDoctor запускается с запланированным интервалом (24 часа для этого оповещения), и оповещение будет снято при следующем запуске.

Пользователи могут вручную запустить диагностику системы из пользовательского интерфейса, чтобы проверить текущее состояние:

• Успешный Volumes Stuck in Destroying State Проверка подтверждает, что условие устранено.
• Оповещение может отображаться до следующего запланированного запуска PowerDoctor.

Такое отложенное удаление оповещений является ожидаемым поведением для всех оповещений PowerDoctor и не относится только к Volumes Stuck in Destroying State Состояние

Автоматическое разрешение

PowerDoctor НЕ устраняет эту проблему автоматически.
Автоматическое восстановление намеренно не предусмотрено из соображений безопасности, так как застрявшие тома могут указывать на основные проблемы системы, требующие исследования.

Самостоятельное решение проблем 

Команда Service Shell: svc_clear_destroying_volumes в PowerStoreOS v5.0, предназначенной для выявления и устранения этого состояния. 

• Команда должна быть выполнена на ведущем устройстве.
• Если вы видите эту ошибку, подключитесь по SSH к ведущему устройству и выполните команду оттуда.

В строке svc_clear_destroying_volumes :

• Запрашивает у базы данных тома в Destroying Состояние
• Отфильтровывает тома, для которых выполняются активные операции удаления.
• Разделяет тома на блочные (не в корзине), блочные (в корзине) и файловые.
• Позволяет пользователю выборочно удалять блочные тома.
• Корректно обрабатывает параллельные операции удаления (обрабатывает "object not found" как успех).

Использование

# Basic usage - interactive mode with confirmation prompts
svc_clear_destroying_volumes

# Skip confirmation prompts (auto-confirm all deletions)
svc_clear_destroying_volumes --yes
svc_clear_destroying_volumes -y

Параметры командной строки

                                                                Таблица 2. Параметры интерфейса командной строки

Интерактивные подсказки

При запуске без параметра --yes перед удалением каждой категории томов сценарий запрашивает подтверждение:

• yes - Перейдите к удалению томов в этой категории
• no - Пропустите эту категорию и перейдите к следующей
• quit - Пропустить оставшиеся категории и показать окончательную сводку

Выходные разделы

Сценарий упорядочивает тома, распределяя их по трем разделам:

Раздел A. Блочные тома НЕ помещаются в корзину

Блочные тома в Destroying состояния, которые не находятся в корзине. Эти тома будут удалены с помощью DeleteVolumeCommand.

Раздел B. Блочные тома в корзине

Блочные тома в Destroying', которые находятся в корзине. Эти тома также будут удалены с помощью DeleteVolumeCommand.

Раздел C: Файловые тома

Файловые тома в Destroying Состояние Для файловых томов удаление пока не реализовано. Обратитесь в службу поддержки Dell за помощью с этими томами.

Заключительный обзор

После обработки всех разделов сценарий отображает окончательную сводку, в которой отображаются:

• Количество томов, найденных в каждом разделе
• Количество успешно удаленных томов
• Количество томов, которые не удалось удалить
• Разделы, которые были пропущены пользователем

Если не удалось удалить какие-либо файлы или были найдены файловые тома, сценарий отображает контактную информацию службы поддержки Dell.

Пример выходных данных.

======================================================================
       SVC_CLEAR_DESTROYING_VOLUMES
======================================================================

Querying database for volumes in 'Destroying' state...
Found 3 volume(s) stuck in 'Destroying' state.


Section A: Block Volumes in Destroying State (NOT in Recycle Bin):
------------------------------------------------------------

  [1] Volume:
      ID:           abc12345-1234-5678-90ab-cdef12345678
      Name:         test-volume-1
      Type:         Primary
      Storage Type: Block

Do you want to delete these 1 Block volume(s) in Destroying state (NOT in Recycle Bin)? [yes/no/quit]: yes

Deleting Block volumes in Destroying state (NOT in Recycle Bin)...

  Sending DeleteVolumeCommand for: test-volume-1 (abc12345-1234-5678-90ab-cdef12345678)
  [SUCCESS] Volume deleted successfully:
            Name: test-volume-1
            ID:   abc12345-1234-5678-90ab-cdef12345678

...

======================================================================
                    FINAL SUMMARY
======================================================================

  Section A: Block Volumes in Destroying State (NOT in Recycle Bin)
    Found:   1
    Deleted: 1
    Failed:  0

  Section B: Block Volumes in Destroying State (IN Recycle Bin)
    Found:   0

  Section C: File Volumes in Destroying State
    Found:   0

------------------------------------------------------------
  Total Volumes Found:   1
  Total Deleted:         1
  Total Failed:          0
------------------------------------------------------------

  SUCCESS: All requested volume deletions completed successfully.

======================================================================

Script completed.

Prevention

Чтобы свести к минимуму риск застревания томов в Destroying Состояние

• Не прерывайте — не прерывайте операции удаления и не перезапускайте службы во время активного удаления томов.
• Мониторинг операций удаления — при удалении большого количества томов или моментальных снимков отслеживайте ход выполнения до завершения.
• Поддерживайте работоспособность системы — убедитесь, что система находится в работоспособном состоянии перед массовым удалением (нет активных оповещений, все узлы в режиме онлайн, база данных управления работоспособна).
• Поддерживайте программное обеспечение в актуальном состоянии — используйте последние версии и исправления PowerStoreOS, поскольку новые выпуски содержат улучшения для обеспечения надежности операций удаления.

Ограничение объема файлов Удаление файловых томов пока не реализовано. Если файловые тома найдены в Destroying обратитесь в службу поддержки Dell для получения помощи по очистке вручную.

Обратитесь за помощью в Службу технической поддержки Dell.

Для ускоренного обслуживания см. номер этой статьи базы знаний.

Связанные проверки PowerDoctor

Это оповещение создается в результате диагностики системы PowerDoctor:

• Имя проверки: volumes_in_destroying_state_check
• Периодичность проверки: каждые 24 часа (1440 минут)
• Область проверки: только главное устройство
• Тип проверки: периодическая диагностика системы

Технические детали

В ходе диагностики системы выполняются перечисленные ниже действия.

1. Запрашивает тома в базе данных управления в Destroying Состояние
2. Проверяется наличие связанных команд удаления и состояние их завершения.
3. Определяет тома, в которых команда удаления находится в состоянии COMPLETED ИЛИ для тома не существует команды удаления.
4. При обнаружении одного или нескольких зависших томов появляется оповещение типа MINOR.
5. Автоматически сбрасывает оповещение, если не осталось зависших томов.