PowerFlex : SDC « perte d’accès au volume »

• Sur l’hôte ESXi de la SVM problématique, le pilote du contrôleur RAID signale lsi_mr3 des abandons sur le disque sous-jacent du datastore local, et ESXi signale une perte d’accès au volume.

Dans le journal VMkernel :

2017-12-03T17:47:01.634Z cpu54:33648)ScsiDeviceIO: 2636: Cmd(0x43be59ec8a00) 0x1a, CmdSN 0x1f6f4 from world 0 to dev "naa.6800733259adcc4f214574350619b91a" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
2017-12-03T17:47:44.125Z cpu1:171607)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt abort for device: vmhba2:C2:T0:L0
2017-12-03T17:47:44.125Z cpu1:171607)lsi_mr3: mfi_TaskMgmt:262: ABORT
2017-12-03T17:47:45.125Z cpu34:32905)lsi_mr3: mfi_TaskMgmt:254: Processing taskMgmt virt reset for device: vmhba2:C2:T0:L0
2017-12-03T17:47:45.125Z cpu34:32905)lsi_mr3: mfi_TaskMgmt:258: VIRT_RESET cmd # 273733296
2017-12-03T17:47:45.125Z cpu34:32905)lsi_mr3: mfi_TaskMgmt:262: ABORT
2017-12-03T17:47:45.126Z cpu1:171607)lsi_mr3: fusionWaitForOutstanding:2531: megasas: [ 0]waiting for 1 commands to complete
2017-12-03T17:47:46.877Z cpu29:35817)HBX: 2851: 'datastore3': HB at offset 3691008 - Waiting for timed out HB:

2017-12-03T17:47:45.126Z info hostd[41B40B70] [Originator@6876 sub=Vimsvc.ha-eventmgr] Event 219 : Lost access to volume 59b2c23a-98396dd8-aa53-84a9c4b71ca1 (datastore3) due to connectivity issues. Recovery attempt is in progress and outcome will be reported shortly.

• L’appareil SDS peut signaler un abandon de tâche (qui se trouve à la fois dans var/log/messages et dans le journal VMware), de sorte que le processus SDS sur cette SVM subirait de longues E/S en transit, ce qui aurait un impact supplémentaire sur la stabilité du système scaleio

• Les SDC consignent ensuite une erreur IO dans le log VMkernel, car le SDS problématique rencontrait un problème de socket net en raison de la lenteur de la réponse du magasin de données local, et les magasins de données d’application résidant sur le volume ScaleIO peuvent signaler une perte d’accès :

2017-12-03T17:47:52.060Z cpu39:33682)scini: netSock_RcvIntrn:1903: ScaleIO R2_0:Error: Failed Success to receive 128 data PTR 0x4306d2923de4 socket 0x4306d2924200
2017-12-03T17:47:54.061Z cpu1:33476)scini: mapVolIO_ReportIOErrorIfNeeded:361: ScaleIO R2_0:[201590843] IO-ERROR comb: 32ba80000015. offsetInComb 11387944. SizeInLB 1. SDS_ID de31ad4800000001. Comb Gen 39. Head Gen 10199.
2017-12-03T17:47:54.061Z cpu1:33476)scini: mapVolIO_ReportIOErrorIfNeeded:374: ScaleIO R2_0:Vol ID 0x756be73300000017. Last fault Status IO_HARD_ERROR(20).Last error Status NOT_CONN(4) Reason (ABORTED) Retry count (2) chan (4)

2017-12-03T17:47:54.125Z info hostd[3FAAFB70] [Originator@6876 sub=Vimsvc.ha-eventmgr] Event 220 : Lost access to volume 59cb2f80-40ad26ac-cf4f-84a9c4b71ce1 (OS_windows_01) due to connectivity issues. Recovery attempt is in progress and outcome will be reported shortly.
2017-12-03T17:47:54.125Z info hostd[3FAAFB70] [Originator@6876 sub=Vimsvc.ha-eventmgr] Event 221 : Lost access to volume 59cb2f9e-984e3ff8-63e1-84a9c4b71ce1 (OS_Linux_01) due to connectivity issues. Recovery attempt is in progress and outcome will be reported shortly.
Impact

Impact

Le SDC peut perdre l’accès aux datastores résidant sur le volume PowerFlex, et l’application ou la machine virtuelle de ces datastores peut être affectée, par exemple, le système de fichiers est passé en lecture seule.
 

• Les datastores VMFS sont surveillés via les pulsations émises sous la forme d’opérations d’écriture environ toutes les 3 s vers les volumes VMFS à partir des hôtes. Lorsque le datastore local de SVM répond lentement, la durée totale des E/S de pulsation ne se termine pas dans un délai de 16 secondes, le datastore est marqué comme hors ligne et un message de perte d’accès au volume est généré par hostd pour refléter ce comportement. Vous trouverez plus d’informations dans la base de connaissances VMware Comprendre l’accès perdu aux messages de volume dans ESXi 
• Dans ce cas, le comportement exact du SDS ne peut pas être prédit, car il indique quels messages keepalive manqueraient et quels autres composants PowerFlex seront envoyés. Certaines des E/S SDC qui doivent être traitées par ce SDS peuvent dépasser le délai d’expiration du système d’exploitation ou des applications, ce qui peut avoir un impact.