VxFlex: Niestabilność sieci hostów SDS może powodować niedostępność danych
Summary: System zgłasza powtarzające się rozłączanie SDS i ewentualne błędy we/wy są wyświetlane na komputerach klienckich. Zapoznaj się z podobnym problemem https://www.dell.com/support/kbdoc/en-us/000181511/sds-process-instability-causes-i-o-error ...
Symptoms
2018-05-31 19:22:30.656605 SDS_DISCONNECTED ERROR SDS: sds05 (id: 540fde2500000005) decoupled.
2018-05-31 19:23:10.768550 SDS_IN_COOL_DOWN WARNING SDS: sds05 (ID 540fde2500000005) will disconnect from MDM for 15 seconds because
2018-05-31 19:23:12.668653 SDS_DISCONNECTED ERROR SDS: sds05 (id: 540fde2500000005) decoupled.
2018-05-31 19:23:50.878713 SDS_IN_COOL_DOWN WARNING SDS: sds05 (ID 540fde2500000005) will disconnect from MDM for 15 seconds because
2018-05-31 19:23:52.675536 SDS_DISCONNECTED ERROR SDS: sds05 (id: 540fde2500000005) decoupled.
2018-05-31 19:24:24.107139 SDS_RECONNECTED INFO SDS: sds05 (ID 540fde2500000005) reconnected
2018-05-31 19:24:39.194414 SDS_IN_COOL_DOWN WARNING SDS: sds05 (ID 540fde2500000005) will disconnect from MDM for 15 seconds because
Sporadyczne komunikaty o odłączeniu w dziennikach SDS są podobne do przedstawionych poniżej:
31/05 19:38:32.468959 1e3b8eb8:contNet_OscillationNotif:01675: Con 540fde2500000005 - Oscillation of type 3 (RCV_KA_DISCONNECT) reported
31/05 19:38:32.469047 1e409eb8:contNet_OscillationNotif:01675: Con 540fde2500000005 - Oscillation of type 1 (SOCKET_DOWN) reported
Pojawienie się komunikatów na poziomie systemu operacyjnego lub infrastruktury sieciowej i/lub wzrost liczby powiązanych liczników wskazujących na niestabilność sieci Typy komunikatów i liczników różnią się znacznie w zależności od używanego systemu operacyjnego i infrastruktury. Aby uzyskać szczegółowe informacje i metody wykrywania, należy skontaktować się z odpowiednimi dostawcami oprogramowania i sprzętu.
Wpływ
Potencjalna niedostępność danych użytkowników Prawdopodobieństwo niedostępności danych wzrasta proporcjonalnie do czasu utrzymywania się podstawowego problemu.
Cause
Gdy rozłączenia są krótkotrwałe, w pewnych momentach serwer SDS hostowany na serwerze, którego dotyczy problem, może zgłosić inny serwer SDS jako odłączony od niego, podczas gdy jego równorzędne serwery nie dostarczają podobnego raportu dokładnie w tym samym czasie.
W takich okolicznościach MDM może podjąć decyzję o degradacji części danych, pozostawiając jedyną prawidłową kopię tych części na uszkodzonym hoście.
Jeśli uszkodzony host całkowicie odłączy się od sieci, te części danych będą niedostępne dla aplikacji użytkownika.
Resolution
- Zapewnienie nadmiarowości sieci dla ruchu w sieci SDS-SDS (adresy IP skonfigurowane jako „All” lub „SDS-Only”).
-
Aby uniknąć niedostępności danych użytkownika, monitoruj infrastrukturę sieciową pod kątem niestabilności i odłącz porty, które powodują problemy, lub zatrzymaj hostowany serwer SDS, uruchamiając:
/opt/emc/scaleio/sds/bin/delete_service.shZatrzymanie SDS uruchamia odbudowę. Po rozwiązaniu problemu z siecią ponownie podłącz porty i uruchom serwer SDS (jeśli został wcześniej zatrzymany), uruchamiając:
/opt/emc/scaleio/sds/bin/create_service.sh
- Gdy dane użytkownika są niedostępne, należy rozwiązać problem z siecią. Po rozwiązaniu problemu system powinien automatycznie odzyskać sprawność i udostępnić dane użytkownika.