Estado de alarma del SDS de PowerFlex causado por un error del kernel de Linux

Situación

• Intel Haswell Se está utilizando la CPU.
• Uno de los SDS informa el estado "datos degradados" y SDC perdió la conexión con los volúmenes, sin motivo aparente
• Estado de alarma de SDS
   

Síntomas

• Los eventos del sistema ScaleIO informan "datos degradados":

ScaleIO system events report "data degraded":
205466 2015-12-10 08:11:49.450 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.
205468 2015-12-10 08:12:04.688 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.
205470 2015-12-10 08:12:06.699 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.
205472 2015-12-10 08:12:16.931 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.

SDS exp. 0:

10/12 02:13:14.134144 Panic in file /emc/svc_flashbld/workspace/ScaleIO-SLES12/src/tgt/ioh/ioh.c, line 70, function iohIo_TimerExpired, PID 22333.Panic Expression !(1).
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosDbg_BackTrace+0x22) [0x479ba9]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosDbg_Panic+0xf0) [0x4740ad]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(iohIo_TimerExpired+0x5d) [0x43d92d]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosTimerQ_PollUnlocked+0x1b4) [0x46f6e3]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosTimer_PollQRange+0x83) [0x46fa6c]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(netPoll_StartIntr+0x2ef) [0x465808]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosUmt_StartFunc+0xbe) [0x47f07d]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosUmt_SignalHandler+0x4a) [0x47fa3a]

Impacto

• Datos no disponibles
• SDC perdió la conexión a los volúmenes.
• Falla de I/O
• Degradación del rendimiento/servicio de I/O prolongado

Debido al error del kernel de Linux, el proceso de SDS se comportó de manera anormal; debido a esta condición, el proceso de SDS estaba en tensión y el comportamiento era impredecible.
Mientras respondía a las solicitudes de conexión persistente, el SDS no estaba completamente funcional y no respondía a las solicitudes de I/O del SDC.
Esta condición no permitía que ScaleIO marcara el SDS como fallido, lo que finalmente hacía que los datos no estuvieran disponibles.

• Información de error del kernel de Linux:
  Futex: Corrección de una condición de carrera entre REQUEUE_PI y muerte de tarea (bcn #851603 (serie de escalabilidad futex).
  Futex: Asegúrese de que get_futex_key_refs() siempre implique una barrera (bcn #851603 (serie de escalabilidad futex)).
   
• Para obtener más información, consulte los siguientes enlaces:
  Suse:SUSE-SU-2015:0068-1
  Red Hat: Un grave error de Red Hat Linux afecta a los servidores basados en Haswell - InfoQ

Solución alternativa

• Actualice la versión del kernel de Linux.