VxFlex: Et ustabilt SDS-værtsnetværk kan medføre manglende tilgængelighed af brugerdata
Summary: Systemet rapporterer gentagne afbrudte SDS-forbindelser og eventuelt I/O-fejl vist på klienterne. Læs et lignende problem https://www.dell.com/support/kbdoc/en-us/000181511/sds-process-instability-causes-i-o-error ...
Symptoms
2018-05-31 19:22:30.656605 SDS_DISCONNECTED ERROR SDS: sds05 (id: 540fde2500000005) decoupled.
2018-05-31 19:23:10.768550 SDS_IN_COOL_DOWN WARNING SDS: sds05 (ID 540fde2500000005) will disconnect from MDM for 15 seconds because
2018-05-31 19:23:12.668653 SDS_DISCONNECTED ERROR SDS: sds05 (id: 540fde2500000005) decoupled.
2018-05-31 19:23:50.878713 SDS_IN_COOL_DOWN WARNING SDS: sds05 (ID 540fde2500000005) will disconnect from MDM for 15 seconds because
2018-05-31 19:23:52.675536 SDS_DISCONNECTED ERROR SDS: sds05 (id: 540fde2500000005) decoupled.
2018-05-31 19:24:24.107139 SDS_RECONNECTED INFO SDS: sds05 (ID 540fde2500000005) reconnected
2018-05-31 19:24:39.194414 SDS_IN_COOL_DOWN WARNING SDS: sds05 (ID 540fde2500000005) will disconnect from MDM for 15 seconds because
Meddelelser om midlertidige afbrydelser i SDS-logfilerne svarer til følgende:
31/05 19:38:32.468959 1e3b8eb8:contNet_OscillationNotif:01675: Con 540fde2500000005 - Oscillation of type 3 (RCV_KA_DISCONNECT) reported
31/05 19:38:32.469047 1e409eb8:contNet_OscillationNotif:01675: Con 540fde2500000005 - Oscillation of type 1 (SOCKET_DOWN) reported
Udseende af meddelelser på OS-niveau eller netværksinfrastrukturniveau og/eller en stigning i relaterede tællere, hvilket indikerer ustabilitet i netværket Typen af meddelelser og tællere varierer meget afhængigt af det anvendte operativsystem og den anvendte infrastruktur. Kontakt de respektive software- og hardwareleverandører for at få oplysninger og registreringsmetoder.
Indvirkning
Potentiale for manglende tilgængelighed af brugerdata Sandsynligheden for datautilgængelighed øges proportionalt med, hvor længe det underliggende problem fortsætter.
Cause
Når afbrydelser er kortvarige, kan SDS, der hostes på den server, der oplever problemet, på visse tidspunkter rapportere et andet SDS som afbrudt fra det, mens dets jævnaldrende ikke leverer en lignende rapport på samme nøjagtige tid.
Under sådanne omstændigheder kan MDM beslutte at forringe dele af dataene og efterlade den eneste gyldige kopi af disse dele på den defekte vært.
Hvis den defekte vært afbrydes helt fra netværket, er disse dele af dataene ikke tilgængelige for brugerprogrammer.
Resolution
- Sikrer netværksredundans til SDS-til-SDS-netværkstrafik (IP-adresser, der er konfigureret som "Alle" eller "Kun SDS").
-
For at undgå utilgængelighed af brugerdata skal du overvåge netværksinfrastrukturen for ustabilitet og enten frakoble de fejlende porte eller stoppe det hostede SDS ved at køre:
/opt/emc/scaleio/sds/bin/delete_service.shHvis du stopper SDS’en, vil det udløse en genopbygning. Når netværksproblemet er løst, skal du tilslutte portene igen og starte sikkerhedsdatabladet (hvis det tidligere var stoppet) ved at køre:
/opt/emc/scaleio/sds/bin/create_service.sh
- Hvis brugerdataene er blevet utilgængelige, skal du løse netværksproblemet. Når det er løst, forventes det, at systemet genoprettes automatisk, så brugerdata bliver tilgængelige.