PowerFlex: Časté odpojování MDM
Summary: Komponenty PowerFlex, jako je MDM, se rychle a často odpojují a znovu připojují. Ztráta připojení následovaná nalezením připojeného v událostech MDM Připojování po 80–190 ms
Instructions
Příznaky
Protokoly událostí MDM ukazující časté odpojování a opětovné připojování komponenty MDM:
2023-xx-xx 00:00:21.316 MDM_CLUSTER_LOST_CONNECTION WARNING The MDM, <MDM_Name> (ID <MDM_ID>), has lost connection to the cluster. 2023-xx-xx 00:00:21.419 MDM_CLUSTER_CONNECTED INFO The MDM, <MDM_Name> (ID <MDM_ID>), connected after 100ms 2023-xx-xx 00:00:23.480 MDM_CLUSTER_LOST_CONNECTION WARNING The MDM, <MDM_Name> (ID <MDM_ID>), has lost connection to the cluster. 2023-xx-xx 00:00:23.584 MDM_CLUSTER_CONNECTED INFO The MDM, <MDM_Name> (ID <MDM_ID>), connected after 110ms
Výstup SAR z odpojujícího se serveru MDM s vysokým počtem opakovaných přenosů TCP:
sar -n ETCP 1 -t -f sar.0
atmptf/s estres/s retrans/s isegerr/s orsts/s
00:00:27 AM 0.00 0.00 62.00 0.00 0.00
00:00:28 AM 0.00 0.00 88.12 0.00 0.00
00:00:29 AM 0.00 3.00 100.00 0.00 0.00
00:00:30 AM 0.00 0.00 71.29 0.00 0.00
00:00:31 AM 0.00 0.00 71.00 0.00 0.00
...
00:01:02 AM 0.00 0.00 48.51 0.00 0.00
00:01:03 AM 0.00 0.00 15.00 0.00 0.00
00:01:04 AM 0.00 0.00 207.00 0.00 0.00
00:01:05 AM 0.00 0.00 36.00 0.00 0.00
00:01:06 AM 0.00 0.99 105.94 0.00 0.00
Důsledky
Stručné události snížení výkonu clusteru MDM
Snížení výkonu
Hlavní příčina
Byl opraven server MDM a linuxové jádro bylo upgradováno z verze 3.x na verzi 5.x. Tato aktualizace jádra mění mnoho výchozích parametrů operačního systému na jiné hodnoty. V tomto případě byl mimo jiné zakázán parametr TCP "net.ipv4tcp_fack", ale zdá se, že tento parametr způsobil vysoké opakované přenosy TCP.
Příkaz RPM SDS poskytuje konfigurační soubor s názvem emc.conf v adresáři /opt/emc/scaleio/sds/cfg/. Tento soubor obsahuje mnoho doporučených parametrů operačního systému od společnosti Dell.
Pokud se jedná o prostředí racku/zařízení PowerFlex, nástroj PowerFlex Manager automaticky zkopíruje soubor emc.conf z umístění "/opt/emc/scaleio/sds/cfg" do každého souboru systcl.conf serveru a použije jej. K tomu dojde pouze při počátečním nasazení uzlu. Je možné, že soubor sysctl.conf nebyl správně aktualizován. Pokud neexistuje soubor sysctl.conf se správnými hodnotami, je možné, že se po aktualizaci jádra na verzi 5.x změní některé důležité parametry.
Zástupné řešení
Pokud soubor sysctl.conf v prostředí racku/zařízení PowerFlex neobsahuje všechny parametry, které obsahuje soubor emc.conf, doporučuje se zkopírovat soubor emc.conf do každého souboru /etc/sysctl.conf každého serveru. Chcete-li použít změny na serveru. Server lze buď restartovat, nebo spustit příkaz "sysctl -p" pro použití změn v souboru /etc/sysctl.conf. Při provádění těchto změn zajistěte, aby byly provedeny správné postupy údržby.
Společnost Dell Technologies doporučuje použít tyto parametry systému Linux na každý server, ale v konečném důsledku záleží na firmách. Konzultujte osvědčené postupy nebo máte-li jakékoli dotazy, obraťte se na dodavatele operačního systému.
Dotčené verze
Všechny verze PowerFlex