Відкрита зміна: Кластер LCM не справився під час перезавантаження вузла
Summary: LCM не працював під час перезавантаження вузла через блокування контролера CSI та депо-менеджера.
This article applies to
This article does not apply to
This article is not tied to any specific product.
Not all product versions are identified in this article.
Symptoms
LCM не працював під час оновлення OCP або перезавантаження вузла, інтерфейс оновлення втратив доступ
.Увійдіть в OCP, виконайте команду "oc get pods -n dell-acp", щоб перевірити стан pods, і знайте, що один pod csi-vxflexos-controller у статусі ImagePullBackOff , а один pod mcp-depot-manager у статусі ContainerCreationing . Наприклад:
Виконати команду "oc logs <pod_name> -n dell-acp -c driver" для перевірки журналів pod.
Виконайте команду "oc describe pod <pod_name> -n dell-acp", щоб перевірити ContainerCreating mcp-depot-manager (на прикладі скріншоту вище ім'я pod mcp-depot-manager-5d5c7cbbb6-twqr5), вона повідомляє про попередження FailedMount нижче:
Виконайте команду "oc get nodes" для перевірки статусу вузла, один вузол перебуває у статусі SchedulingDisabled, наприклад:
.Увійдіть в OCP, виконайте команду "oc get pods -n dell-acp", щоб перевірити стан pods, і знайте, що один pod csi-vxflexos-controller у статусі ImagePullBackOff , а один pod mcp-depot-manager у статусі ContainerCreationing . Наприклад:
Виконати команду "oc logs <pod_name> -n dell-acp -c driver" для перевірки журналів pod.
- У капсулі Running csi-vxflexos-controller журнал показує, що він намагається отримати лідер-лізинг, наприклад:
mystic@mystic-VM:~$ OC Logs CSI-VXflexOS-Controller-7D9B97C659-Q8D4N -N Dell-ACP -C драйвер
I0918 08:33:23.460955 1 leaderelection.go:248] Спроба отримати лідерський оренд dell-acp/driver-csi-vxflexos-dellemc-com...
I0918 08:33:23.460955 1 leaderelection.go:248] Спроба отримати лідерський оренд dell-acp/driver-csi-vxflexos-dellemc-com...
- У капсулі контролера ImagePullBackOff csi-vxflexos-controller журнал показує, що він успішно отримав оренду лідера, наприклад:
mystic@mystic-VM:~$ OC logs csi-vxflexos-controller-7d9b97c659-4tn2v -n dell-acp -c драйвер
I0918 09:07:30.076298 1 leaderelection.go:248] намагаюся отримати лідерський лізинг dell-acp/driver-csi-vxflexos-dellemc-com...
I0918 09:07:46.074524 1 leaderelection.go:258] успішно отримав оренду dell-acp/driver-csi-vxflexos-dellemc-com
time="2023-09-18T09:07:46Z" level=info msg="configured 69de1f95f50e390f" allSystemNames= endpoint="https://dellpowerflex.h01.com" isDefault=true nasName=0xc000489950 nfsAcls= password="********" skipCertificateValidation=false systemID=69de1f95f50e390f user=admin
time="2023-09-18T09:07:46Z" level=info msg="файл конфігурації драйвера " file=/vxflexos-config-params/driver-config-params.yaml
time="2023-09-18T09:07:46Z" level=info msg="Читати CSI_LOG_FORMAT з файлу конфігурації журналу" format=text
time="2023-09-18T09:07:46Z" level=info msg="Read CSI_LOG_LEVEL from log configuration file" fields.level=debug
time="2023-09-18T09:07:46Z" level=info msg="файл конфігурації масиву" file=/vxflexos-config/config
time="2023-09-18T09:07:46Z" level=info msg="Дослідження всіх масивів. Кількість масивів: 1"
time="2023-09-18T09:07:46Z" level=info msg="за замовчуванням масив встановлено на array ID: 69de1f95f50e390f"
time="2023-09-18T09:07:46Z" level=info msg="69de1f95f50e390f — це масив за замовчуванням, пропускаючи оновлення карти VolumePrefixToSystems. \n"time
="2023-09-18T09:07:46Z" level=info msg="array 69de1f95f50e390f успішно прободо"time
="2023-09-18T09:07:46Z" level=info msg="configured csi-vxflexos.dellemc.com" IsApproveSDCEnabled=false IsHealthMonitorEnabled=false IsQuotaEnabled=false IsSdcRenameEnabled=false MaxVolumesPerNode=0 allowRWOMultiPodAccess=false autoprobe=true externalAccess= mode=controller nfsAcls= privatedir=/dev/disk/csi-vxflexos sdcGUID= sdcPrefix= thickprovision=false
time="2023-09-18T09:07:46Z" level=info msg="зареєстрована служба ідентифікації"
time="2023-09-18T09:07:46Z" level=info msg="зареєстровано сервіс контролера"
time="2023-09-18T09:07:46Z" level=info msg="Реєстрація додаткових серверів GRPC"
time="2023-09-18T09:07:46Z" level=info msg=сервер подачі="unix:///var/run/csi/csi.sock"
I0918 09:07:30.076298 1 leaderelection.go:248] намагаюся отримати лідерський лізинг dell-acp/driver-csi-vxflexos-dellemc-com...
I0918 09:07:46.074524 1 leaderelection.go:258] успішно отримав оренду dell-acp/driver-csi-vxflexos-dellemc-com
time="2023-09-18T09:07:46Z" level=info msg="configured 69de1f95f50e390f" allSystemNames= endpoint="https://dellpowerflex.h01.com" isDefault=true nasName=0xc000489950 nfsAcls= password="********" skipCertificateValidation=false systemID=69de1f95f50e390f user=admin
time="2023-09-18T09:07:46Z" level=info msg="файл конфігурації драйвера " file=/vxflexos-config-params/driver-config-params.yaml
time="2023-09-18T09:07:46Z" level=info msg="Читати CSI_LOG_FORMAT з файлу конфігурації журналу" format=text
time="2023-09-18T09:07:46Z" level=info msg="Read CSI_LOG_LEVEL from log configuration file" fields.level=debug
time="2023-09-18T09:07:46Z" level=info msg="файл конфігурації масиву" file=/vxflexos-config/config
time="2023-09-18T09:07:46Z" level=info msg="Дослідження всіх масивів. Кількість масивів: 1"
time="2023-09-18T09:07:46Z" level=info msg="за замовчуванням масив встановлено на array ID: 69de1f95f50e390f"
time="2023-09-18T09:07:46Z" level=info msg="69de1f95f50e390f — це масив за замовчуванням, пропускаючи оновлення карти VolumePrefixToSystems. \n"time
="2023-09-18T09:07:46Z" level=info msg="array 69de1f95f50e390f успішно прободо"time
="2023-09-18T09:07:46Z" level=info msg="configured csi-vxflexos.dellemc.com" IsApproveSDCEnabled=false IsHealthMonitorEnabled=false IsQuotaEnabled=false IsSdcRenameEnabled=false MaxVolumesPerNode=0 allowRWOMultiPodAccess=false autoprobe=true externalAccess= mode=controller nfsAcls= privatedir=/dev/disk/csi-vxflexos sdcGUID= sdcPrefix= thickprovision=false
time="2023-09-18T09:07:46Z" level=info msg="зареєстрована служба ідентифікації"
time="2023-09-18T09:07:46Z" level=info msg="зареєстровано сервіс контролера"
time="2023-09-18T09:07:46Z" level=info msg="Реєстрація додаткових серверів GRPC"
time="2023-09-18T09:07:46Z" level=info msg=сервер подачі="unix:///var/run/csi/csi.sock"
Виконайте команду "oc describe pod <pod_name> -n dell-acp", щоб перевірити ContainerCreating mcp-depot-manager (на прикладі скріншоту вище ім'я pod mcp-depot-manager-5d5c7cbbb6-twqr5), вона повідомляє про попередження FailedMount нижче:
Виконайте команду "oc get nodes" для перевірки статусу вузла, один вузол перебуває у статусі SchedulingDisabled, наприклад:
Cause
Якщо активний контейнер контролера csi та менеджер депо MCP знаходяться на одному вузлі, після перезавантаження LCM контролер csi і менеджер депо будуть переплановані на нові вузли. Під час завантаження капсули контролер csi і менеджер депо потрапляють у глухий кут і не можуть завантажитися.
Resolution
1. Запустіть команду "oc get pods -n dell-acp |grep csi", щоб визначити назву pod контролера CSI з поганим статусом.
2. Виконайте команду "oc delete pod <pod_name> -n dell-acp", щоб видалити ідентифікований pod/pods.
Наприклад:
3. Зачекайте кілька хвилин і виконайте команду "oc get pods -n dell-acp", щоб переконатися, що всі капсули працюють у статусі Running. Якщо CSI-контролер або MCP-депо-менеджер досі не працюють, спробуйте ще раз
вищезазначений крок.4. Поки всі капсули не будуть у режимі Працюючи, спробуйте повторити LCM для оновлення кластера.
2. Виконайте команду "oc delete pod <pod_name> -n dell-acp", щоб видалити ідентифікований pod/pods.
Наприклад:
3. Зачекайте кілька хвилин і виконайте команду "oc get pods -n dell-acp", щоб переконатися, що всі капсули працюють у статусі Running. Якщо CSI-контролер або MCP-депо-менеджер досі не працюють, спробуйте ще раз
вищезазначений крок.4. Поки всі капсули не будуть у режимі Працюючи, спробуйте повторити LCM для оновлення кластера.
Article Properties
Article Number: 000217992
Article Type: Solution
Last Modified: 18 Sept 2026
Version: 4
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.