VPLEX: Závažná latence zápisu na distribuovaných zařízeních VPlex kvůli problémům s výkonem backendu

Hostitelé zažívají závažnou latenci zápisu, která může způsobit du

.Na straně VPlex může dojít k přerušení hostitele (události stdf/10) se stavem 0x2a nebo 0x8a. To znamená, že hostitelé přerušují zápis IOs:

128.221.252.67/cpu0/log:5988:W/"00601672b5b475554-2":126043:<6>2019/01/10 19:39:09.68: stdf/10 scsi tmf [úloha přerušení] na fcp itlq: [10:00:00:00:C9:C9:AB:DC (0x10000000c9c9abdc) A0-FC00 (0x5000144260756500) 0x8000000000000 0x243] vol dd_vol taskElapsedTime(usec) 5339 dormantQCnt 0 enabledQCnt 0 status 2a00000000000605:400ac800000002
128.221.252.67/cpu0/log:5988:W/"00601672b5b475554-2":126043:<6>2019/01/10 19:39:09.68: stdf/10 scsi tmf [úloha přerušení] na fcp ITLQ: [10:00:00:00:C9:C9:AB:DC (0x10000000c9c9abdc) A0-FC00 (0x5000144260756500) 0x8000000000000 0x243] vol dd_vol taskElapsedTime(usec) 5339 dormantQCnt 0 enabledQCnt 0 status 2a00000000000605:400ac800000002
128.221.252.67/cpu0/log:5988:W/"00601672b5b475554-2":126043:<6>2019/01/10 19:39:09.68: stdf/10 scsi tmf [úloha přerušení] na fcp ITLQ: [10:00:00:00:C9:C9:AB:DC (0x10000000c9c9abdc) A0-FC00 (0x5000144260756500) 0x8000000000000 0x243] vol dd_vol taskElapsedTime(usec) 5339 dormantQCnt 0 enabledQCnt 0 status 2a00000000000605:400ac80000002


Stream backendových časových limitů (události scsi/140) pro svazek úložiště, který odpovídá virtuálnímu svazku prezentovanému dotčeným hostitelům:
 

firmware.log_20181019000922:128.221.253.36/cpu0/log:5988:W/"0060166fc49615528-1":304763:<4>2019/01/10 19:39:09.68: scsi/140 Časový limit příkazu SCSI, 0x7ec67ce41278 opcode 0x2a luid VPD83T3:600000000000000000000000000000000 nexus x fcp i 0xc0014487873b8800 t 0x5006016c47e02548 0x000f000000000000 firmware.log_20181019000922:128.221.253.36/cpu0/log:5988:W/"0060166fc49615528-1":304764:<4>10. 1. 2019 19:39:09.68: Časový limit příkazu SCSI/140 Scsi 0x7ec67b9c99f0, operační kód 0x2a luid VPD83T3::600000000000000000000000000000000000 Nexus x FCP I 0xc0014487873b8800 t 0x5006016c47e02548 0x004f000000000000 firmware.log_20181019000922:128.221.253.36/cpu0/log:5988:W/"0060166fc49615528-1":304765:<4>2019/01/10 19:39:09.68: Časový limit příkazu scsi/140 Scsi 0x7ec67f032f90 časový limit, operační kód 0x2a luid VPD83T3:600000000000000000000000000000000000000 nexus x fcp i 0xc0014487873b8900 t 0x5006016d47e02548 0x000f0000000000

Události snížení výkonu (události amf/249) lze také pozorovat u dotčených svazků úložiště.

128.221.253.67/cpu0/log:5988:W/"0060166fd1a610335-2":2359857:<4>2019/01/10 19:39:09.6: Došlo ke snížení výkonu sop_xxxx AMF/249 AMF. Průměrná latence vstupně-výstupních operací zápisu se zvýšila z 0,0 milisekund na 216,197 milisekund, což je nad přijatelným limitem 200 milisekund.
128.221.253.67/cpu0/log:5988:W/"0060166fd1a610335-2":2359857:<4>2019/01/10 19:39:09.6: Došlo ke snížení výkonu sop_xxxx AMF/249 AMF. Průměrná latence vstupně-výstupních operací zápisu se zvýšila z 0,0 milisekund na 216,197 milisekund, což je nad přijatelným limitem 200 milisekund.
128.221.253.67/cpu0/log:5988:W/"0060166fd1a610335-2":2359857:<4>2019/01/10 19:39:09.6: Došlo ke snížení výkonu sop_xxxx AMF/249 AMF. Průměrná latence vstupně-výstupních operací zápisu se zvýšila z 0,0 milisekund na 216,197 milisekund, což je nad přijatelným limitem 200 milisekund.


Zrcadlová noha pole RAID-1 postavená na nevýkonném svazku úložiště může snížit výkon celého zařízení RAID-1 a zvýšit latenci I/O pro aplikace používající toto zařízení. To je způsobeno tím, že zápis I/O se zapisuje až po potvrzení na obou větvích (jednou z nich je špatně fungující větev)

To může být způsobeno jakýmkoli problémem backendového pole nebo backendové topologie fabric, který by způsobil, že se ve VPLEX zobrazí datový proud vypršení časových limitů backendu.

Povolení funkce izolace zrcadlení by zmírnilo problém s vysokou latencí, protože by izolovalo zařízení s nízkým výkonem a zastavilo by zpracování I/O. To by mělo aplikacím umožnit zotavení, dokud nebudou vyřešeny problémy s back-endem.

VPlexcli:/> povolení

izolace zrcadlení zařízeníVPlexcli:/>zrcadlení zařízení se zobrazí
Cluster povolen Automatické odizolace Interval izolace Interval Unisolation --------- ------- ---------------- ------------------ --------------------

cluster-1 true true 60 14400
cluster-2 true true 60 14400


Tato funkce automaticky izoluje [přestaňte dělat I/O za účelem] špatně fungujících větví RAID-1. Je povolena pro každý cluster. 

Profesionály:

1.  Automatická funkce, která dokáže izolovat špatně fungující nohy rychle poté, co se problém vyskytne [obvykle během několika minut]
2.  Když se zařízení stane neizolovaným, opětovné sestavení proběhne automaticky a obnoví se pouze změny, ke kterým došlo v době, kdy byla izolovaná noha zařízení. Opětovná synchronizace obvykle trvá jen několik minut
3. Funkci lze snadno a rychle povolit a zakázat 

Nevýhody:

1. I když je noha zařízení izolovaná, zařízení nejvyšší úrovně už nemá redundanci
2. Jakmile je větev zařízení izolována, VPLEX nezkontroluje, zda je noha odpojena po dobu 4 hodin [vyhnete se tak situaci, kdy občasné problémy s výkonem způsobí občasné ovlivnění výkonu]

Další podrobnosti o funkci izolace zrcadlení naleznete v příručce správce VPLEX.

Použití izolace zrcadlení pouze zmírní problémy s výkonem, a tím zastaví dopad na výkon. Hlavní příčinu snížení výkonu je však třeba dále prozkoumat. Týmy backendového pole a backendové topologie Fabric by měly být zapojeny, aby tento problém dále prozkoumaly.

POZNÁMKA:
Viz také článek KB 530520 "VPLEX: Selhání jednotlivých komponent v topologii Fabric nebo řadičích pole mohou vést k trvalému výkonu DU na hostitelích, kteří přistupují k úložišti prostřednictvím VPLEX.

Tento obsah je přeložený do dalších jazyků: 

https://downloads.dell.com/TranslatedPDF/PT-BR_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/ZH-CN_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/AR-EG_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/DE_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/ES_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/FR_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/KO_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/JA_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/IT_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/NL_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/PT_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/RU_KB530258.pdf

https://downloads.dell.com/TranslatedPDF/SV_KB530258.pdf