VPLEX: Сильна затримка запису на розподілених пристроях VPlex через проблеми з продуктивністю бекенду

Хости стикаються з сильною затримкою запису, що може спричинити проблему продуктивності.

З боку VPlex може бути потік відмов від хостів (stdf/10 події) зі статусом 0x2a або 0x8a. Це означає, що хости припиняють запис IOs:

128.221.252.67/cpu0/log:5988:W/"00601672b5b475554-2":126043:<6>2019/01/10 19:39:09.68: stdf/10 Scsi Tmf [Скасування завдання] на fcp ITLQ: [10:00:00:C9:C9:AB:DC (0x10000000c9c9abdc) A0-FC00 (0x5000144260756500) 0x8000000000000 0x243] vol dd_vol taskElapsedTime(usec) 5339 dormantQCnt 0 enabledQCnt 0 status 2a00000000000605:400ac800000002
128.221.252.67/cpu0/log:5988:W/"00601672b5b475554-2":126043<:6>2019/01/10 19:39:09.68: stdf/10 Scsi Tmf [Скасування завдання] на fcp ITLQ: [10:00:00:C9:C9:AB:DC (0x10000000c9c9abdc) A0-FC00 (0x5000144260756500) 0x8000000000000 0x243] vol dd_vol taskElapsedTime(usec) 5339 dormantQCnt 0 enabledQCnt 0 status 2a00000000000605:400ac800000002
128.221.252.67/cpu0/log:5988:W/"00601672b5b475554-2":126043<:6>2019/01/10 19:39:09.68: stdf/10 Scsi Tmf [Скасування завдання] на fcp ITLQ: [10:00:00:00:C9:C9:AB:DC (0x10000000c9c9abdc) A0-FC00 (0x5000144260756500) 0x8000000000000 0x243] том dd_vol taskElapsedTime(usec) 5339 сплячий QCnt 0 увімкнено QCnt 0 статус 2a0000000000605:400ac80000002


Потік тайм-аутів бекенду (подій scsi/140) щодо обсягу зберігання, який відповідає віртуальному тому, що подається впливовим хостам:
 

firmware.log_20181019000922:128.221.253.36/cpu0/log:5988:W/"0060166fc49615528-1":304763:<4>2019/01/10 19:39:09.68: scsi/140 Команда SCSI 0x7ec67ce41278 тайм-аут, opcode 0x2a luid VPD83T3:6000000000000000000000000000000000000000000000000000000000000000 nexus x fcp i 0xc0014487873b8800 t 0x5006016c47e02548 0x000f000000000000 firmware.log_20181019000922:128.221.253.36/cpu0/log:5988:W/"0060166fc49615528-1":304764:<4>2019/01/10 19:39:09.68: scsi/140 команда scsi 0x7ec67b9c99f0 тайм-аут, opcode 0x2a luid VPD83T3:60000000000000000000000000000000000000000000000000 Nexus X FCP I 0xc0014487873b8800 t 0x5006016c47e02548 0x004f000000000000 firmware.log_20181019000922:128.221.253.36/cpu0/log:5988:W/"0060166fc49615528-1":304765:<4>2019/01/10 19:39:09.68: scsi/140 Команда Scsi 0x7ec67f032f90 тайм-аут, opcode 0x2a luid VPD83T3:600000000000000000000000000000000000000000000000 nexus x fcp i 0xc0014487873b8900 t 0x5006016d47e02548 0x000f0000000000

Також можна спостерігати події погіршення продуктивності (події amf/249) щодо впливових обсягів

зберігання.128.221.253.67/cpu0/log:5988:W/"0060166fd1a610335-2":2359857:<4>2019/01/10 19:39:09.6: AMF/249 Продуктивність sop_xxxx Amf погіршилася. Середня затримка вводу/виводу при записі зросла з 0,0 мілісекунд до 216,197 мілісекунд, що перевищує допустимий ліміт у 200 мілісекунд
.128.221.253.67/cpu0/log:5988:W/"0060166fd1a610335-2":2359857:<4>2019/01/10 19:39:09.6: amf/249 Продуктивність sop_xxxx Amf погіршилася. Середня затримка вводу/виводу при записі зросла з 0,0 мілісекунд до 216,197 мілісекунд, що перевищує допустимий ліміт у 200 мілісекунд
.128.221.253.67/cpu0/log:5988:W/"0060166fd1a610335-2":2359857:<4>2019/01/10 19:39:09.6: amf/249 Продуктивність sop_xxxx Amf погіршилася. Середня затримка вводу/виводу при записі зросла з 0,0 мілісекунд до 216,197 мілісекунд, що перевищує допустимий ліміт у 200 мілісекунд


.Дзеркальна частина RAID-1, побудована на погано працюючому томі зберігання, може знизити продуктивність усього пристрою RAID-1 і збільшити затримки введення/виведення для додатків, що використовують цей пристрій. Це пов'язано з тим, що ввод/операції записуються лише після підтвердження на обох ногах (одна з них — погано виконана частина)

Це може бути пов'язано з будь-якою проблемою бекенд-масиву або бекенд-тканини, яка може спричинити потік тайм-аутів на VPLEX.

Увімкнення функції ізоляції дзеркала зменшить проблему високої затримки, оскільки це ізолює пристрій з поганою роботою і зупинить обробку введень/операцій на ньому. Це має дозволити додаткам відновлюватися, доки проблеми з бекендом не будуть вирішені.

VPlexcli:/>дзеркальна ізоляція пристрою увімкнути

VPlexcli:/>дзеркалоізоляція пристрою показати
Кластер увімкнено Автоматичне розізолення Інтервал ізоляції Інтервал неізоляції
--------- ------- ---------------- ------------------ --------------------
кластер-1 істинний 60 14400
кластер-2 істинний 60 14400


Ця функція автоматично ізолює [припиніть ввод/виведення на] погано працюючі етапи RAID-1. Він увімкнений для кожного кластера. 

Переваги:

1.  Автоматична функціональність, яка може швидко ізолювати погано працюючі ноги після виникнення проблеми [зазвичай протягом кількох хвилин]
2.  Коли пристрій стає ізольованим, перебудова відбувається автоматично і відновлює лише ті зміни, які відбулися під час ізольованої частини пристрою. Зазвичай це займає лише кілька хвилин для повторної синхронізації
3. Цю функцію можна легко і швидко увімкнути та вимкнути 

Мінуси:

1. Хоча ніжка пристрою ізольована, верхній рівень пристрою більше не має резервування
2. Після того, як ніжка пристрою ізольована, VPLEX не перевірятиме розізолення ноги протягом 4 годин [це уникає ситуацій, коли періодичні проблеми з продуктивністю спричиняють періодичний вплив на продуктивність]

Для детальнішої інформації про функцію ізоляції дзеркала, будь ласка, зверніться до VPLEX Admin Guide.

Використання дзеркальної ізоляції лише знімає проблеми з продуктивністю, а отже, припиняє вплив на продуктивність. Однак корінну причину погіршення продуктивності потрібно дослідити детальніше. Команди бекенд-масиву та бекенд-тканини мають бути залучені для подальшого вивчення цього питання.

ПРИМІТКА:
Також згадайте KB 530520, «VPLEX: Відмови окремих компонентів у тканині або контролерах масиву можуть призвести до постійного DU продуктивності на хостах, які отримують доступ до сховища через VPLEX.

Цей матеріал перекладено іншими мовами: 

https://downloads.dell.com/TranslatedPDF/PT-BR_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/ZH-CN_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/AR-EG_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/DE_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/ES_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/FR_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/KO_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/JA_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/IT_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/NL_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/PT_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/RU_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/SV_KB530258.pdf