Реплікація PowerFlex VMware спричиняє високе завантаження процесора та помилки вводу-виводу
Summary: Під час запуску реплікації VMware з PowerFlex SDC хост ESXi зазнає високого використання та помилок вводу-виводу Під час початкової реплікації віртуальних машин з реплікацією VMware за допомогою кластера PowerFlex хост ESXi бачить високе завантаження процесора та помилки вводу-виводу. ...
Symptoms
- VMware Replication 8.4 і нижче
- Початкова реплікація на віртуальній машині або віртуальних машинах
- Реплікована віртуальна машина має багато дисків VMDK (15+)
- Високе завантаження ЦП на хості ESXi, де розміщується віртуальна машина, коли починається реплікація.
- Затримка на зіставлених обсягах з кластера PowerFlex збільшується в затримці до 20-30 мс, можливо, більше.
- Інші віртуальні машини на тому ж хості, який не реплікується, можуть зіткнутися зі зниженням продуктивності та/або помилками вводу-виводу з точки зору програми.
- Перегляд черг на диску з "esxtop" показує, що хост ставить у чергу виклики вводу-виводу до томів серверної частини.
- Внутрішні компоненти (MDM/SDS) надійні та не демонструють жодних проблем із продуктивністю чи помилок.
- Хост ESXi з реплікуючими віртуальними машинами отримує такі повідомлення незабаром після початку реплікації:
2021-05-19T17:58:08.413Z cpu70:2098596)WARNING: ScsiDeviceIO: 1564: Device eui.1309fbc714390806ba291d4e0000001b performance has deteriorated. I/O latency increased from average value of 796 microseconds to 25965 microseconds.
2021-05-19T17:58:10.048Z cpu70:2098596)WARNING: ScsiDeviceIO: 1564: Device eui.1309fbc714390806ba2944570000005d performance has deteriorated. I/O latency increased from average value of 799 microseconds to 26019 microseconds.
2021-05-19T17:58:12.060Z cpu70:2098596)WARNING: ScsiDeviceIO: 1564: Device eui.1309fbc714390806ba291d3d0000000a performance has deteriorated. I/O latency increased from average value of 676 microseconds to 23641 microseconds.
Вплив
Деградація продуктивності та помилки вводу-виводу з точки зору застосування
Cause
Під час початкової реплікації віртуальної машини за допомогою VMware Replication вона виконує контрольну суму кожного блоку для кожного диска .vmdk, який налаштував віртуальна машина. Під час цього процесу обчислення контрольної суми IO надсилається через один потік на хості ESXi, що призводить до серіалізації вводу-виводу контрольної суми. Цей потік також використовується для інших цілей вводу-виводу на хості, спричиняючи ненормальне використання процесора та затримку диска, що, у свою чергу, уповільнює інші віртуальні машини на тому ж хості.
Resolution
VMware виправляє це в пізнішій версії VMware Replication. Версія все ще уточнюється.