Openshift Event Code: 1030NODE0005

En nodes filsystem som blir fullt kan ha en utbredt negativ innvirkning. Dette problemet kan føre til at noen eller alle applikasjonene som er planlagt til denne noden, opplever alt fra redusert ytelse til å bli fullstendig ubrukelig.

Dette problemet kan, avhengig av noden og filsystemet som er involvert, utgjøre en kritisk trussel mot stabiliteten til klyngen.

NodeFilesystemAlmostOutOfSpace-varselet ligner på NodeFilesystemSpaceFillingUp-varselet, men i stedet for å være basert på en prediksjon om at et filsystem vil bli fullt i løpet av en viss tid, bruker det enkle statiske terskler.

Dette varselet utløses på et advarselsnivå når 5 % av plassen forblir i filsystemet, og på et kritisk nivå når 3 % av plassen gjenstår.

Diagnose:
Studere nylige trender for filsystembruk på et instrumentbord. Noen ganger kan et periodisk mønster for skriving og opprydding i filsystemet føre til at den lineære prediksjonsalgoritmen utløser et falskt varsel.

Bruk Linux-operativsystemverktøyene og verktøyene til å undersøke hvilke kataloger som bruker mest plass i filsystemet. Er problemet en uregelmessig tilstand, for eksempel en prosess som ikke klarer å rydde opp bak seg selv og bruker mye plass? Eller ser problemet ut til å være relatert til organisk vekst?

Hvis du vil ha hjelp til diagnosen, kan du se følgende måling i PromQL (utfør spørringen på OCP-nettkonsollen: Se → beregninger → kjøring spørringer):

node_filesystem_free_bytes

Kontroller deretter mountpoint etikett for varselet.

Klimatiltak:

Hvis mountpoint etiketten er /, /sysroot eller /var, fjern ubrukte bilder for å løse problemet:

1. Feilsøk noden ved å få tilgang til nodefilsystemet:
$ NODE_NAME =< forekomstetikett fra alert
> $ oc -n default debug node / $NODE_NAME $
chroot / host

2.Fjern dinglende bilder:
$ podman bilder -q -f dingling = sant | xargs --no-run-if-empty podman rmi

3.Fjern ubrukte bilder:
$ podman bilder | grep -v -e registry.redhat.io -e "quay.io/openshift" -e registry.access.redhat.com -e docker-registry.usersys.redhat.com -e e docker-registry.ops.rhcloud.com -e rhmap | xargs --no-run-if-empty podman rmi 2>/dev/null

4.Exit debug:
$ exit
$ exit

Støtte:
Hvis alle trinnene ovenfor ikke kan løse problemet, kan du kontakte Dell EMCs tekniske støtte for ytterligere undersøkelser.