Linux-ytimen virheen aiheuttama PowerFlex SDS -paniikki

Tilanne

• Intel Haswell Suoritin on käytössä.
• Yksi käyttöturvallisuustiedotteista ilmoittaa "tiedot heikentyneet" -tilan ja SDC: n menettäneen yhteyden taltioihin ilman selvää syytä
• SDS-paniikki
   

Oireet

• ScaleIO-järjestelmän tapahtumaraportti "data degraded":

ScaleIO system events report "data degraded":
205466 2015-12-10 08:11:49.450 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.
205468 2015-12-10 08:12:04.688 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.
205470 2015-12-10 08:12:06.699 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.
205472 2015-12-10 08:12:16.931 MDM_DATA_DEGRADED ERROR The system is now in DEGRADED state.

SDS exp.0:

10/12 02:13:14.134144 Panic in file /emc/svc_flashbld/workspace/ScaleIO-SLES12/src/tgt/ioh/ioh.c, line 70, function iohIo_TimerExpired, PID 22333.Panic Expression !(1).
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosDbg_BackTrace+0x22) [0x479ba9]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosDbg_Panic+0xf0) [0x4740ad]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(iohIo_TimerExpired+0x5d) [0x43d92d]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosTimerQ_PollUnlocked+0x1b4) [0x46f6e3]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosTimer_PollQRange+0x83) [0x46fa6c]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(netPoll_StartIntr+0x2ef) [0x465808]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosUmt_StartFunc+0xbe) [0x47f07d]
/opt/emc/scaleio/sds/bin/sds-1.32.3455.5(mosUmt_SignalHandler+0x4a) [0x47fa3a]

Vaikutus

• Tiedot eivät ole käytettävissä
• SDC:n yhteys taltioihin katkesi.
• I/O-vika
• Pitkä I/O-palvelu/suorituskyvyn heikkeneminen

Linux-ytimen virheen vuoksi SDS-prosessi käyttäytyi epänormaalisti, tämän tilan vuoksi SDS-prosessi oli stressissä ja käyttäytyminen oli arvaamatonta.
Vastatessaan pyyntöihin SDS ei ollut täysin toimiva eikä vastannut SDC:n I/O-pyyntöihin.
Tällainen ehto ei sallinut ScaleIO: n merkitä SDS: ää epäonnistuneeksi, mikä johti lopulta siihen, että tiedot eivät olleet käytettävissä.

• Linux-ytimen virhetiedot:
  Futex: Korjaa kilpailutilanne REQUEUE_PI:n ja tehtäväkuoleman välillä (bcn #851603 (Futex Scalability Series).
  Futex: Varmista, että get_futex_key_refs() merkitsee aina estettä (bcn #851603 (futex-skaalautuvuussarja)).
   
• Lisätietoja on seuraavissa linkeissä:
  SUSE:SUSE-SU-2015:0068-1
  Punainen hattu: Vakava Red Hat Linux -virhe vaikuttaa Haswell-pohjaisiin palvelimiin - InfoQ

Kiertotapa

• Päivitä Linux-ytimen versio.