Openshift-hændelseskode: 1030NODE0005

En nodes filsystem, der bliver fuldt, kan have en udbredt negativ indvirkning. Dette problem kan forårsage, at nogle eller alle de programmer, der er planlagt til den pågældende node, oplever alt fra forringet ydeevne til at blive helt ubrugelige.

Afhængigt af den involverede node og filsystem kan dette problem udgøre en kritisk trussel mod klyngens stabilitet.

Advarslen NodeFilesystemAlmostOutOfSpace ligner advarslen NodeFilesystemSpaceFillUp, men i stedet for at være baseret på en forudsigelse om, at et filsystem bliver fuldt inden for en vis tid, bruger det simple statiske tærskler.

Denne advarsel udløses på et advarselsniveau, når der er 5 % plads tilbage i filsystemet, og på et kritisk niveau, når der er 3 % plads tilbage.

Diagnose:
Undersøg de seneste tendenser for filsystembrug på et dashboard. Nogle gange kan et periodisk mønster med skrivning og oprydning i filsystemet få den lineære forudsigelsesalgoritme til at udløse en falsk alarm.

Brug Linux-operativsystemets værktøjer og hjælpeprogrammer til at undersøge, hvilke mapper der bruger mest plads i filsystemet. Er problemet en uregelmæssig tilstand, såsom en proces, der ikke rydder op bag sig selv og bruger en stor mængde plads? Eller synes spørgsmålet at være relateret til organisk vækst?

For at hjælpe med din diagnose skal du se følgende måling i PromQL (udfør forespørgslen på OCP-webkonsollen: Overhold → målinger → kørselsforespørgsler):

node_filesystem_free_bytes

Kontroller derefter mountpoint etiket til advarslen.

Afbødning:

Hvis ikonet mountpoint Etiketten er /, /sysroot eller /var, skal du fjerne ubrugte billeder for at løse problemet:

1.Debug noden ved at få adgang til nodefilsystemet:
$ NODE_NAME=<instance label fra alert
> $ oc -n standard debug node/$NODE_NAME
$ chroot / host

2.Remove dinglende billeder:
$ podman billeder -q -f dinglende = true | xargs --no-run-if-empty podman rmi

3.Remove ubrugte billeder:
$ podman billeder | grep -v -e registry.redhat.io -e "quay.io/openshift" -e registry.access.redhat.com -e docker-registry.usersys.redhat.com -e docker-registry.ops.rhcloud.com -e RHMAP | xargs --no-run-if-empty podman rmi 2>/dev/null

4.Exit debug:
$ exit
$ exit

Support:
Hvis alle ovenstående trin ikke kan løse problemet, skal du kontakte Dell EMC s tekniske support for yderligere undersøgelse.