Codice evento Openshift: 1030NODO0005

Il riempimento del file system di un nodo può avere un impatto negativo diffuso. Questo problema può causare una o tutte le applicazioni pianificate su tale nodo per riscontrare qualsiasi situazione, da prestazioni ridotte a totale inoperatività.

A seconda del nodo e del file system coinvolti, questo problema può rappresentare una minaccia critica per la stabilità del cluster.

L'avviso NodeFilesystemAlmostOutOfSpace è simile all'avviso NodeFilesystemSpaceFillingUp, ma anziché basarsi sulla previsione che un file system si riempirà in un determinato periodo di tempo, utilizza semplici soglie statiche.

Questo avviso si attiva a livello di avviso quando rimane il 5% di spazio nel file system e a livello critico quando rimane il 3% di spazio.

Diagnosi:
studia le tendenze recenti di utilizzo del file system in un dashboard. A volte, un modello periodico di scrittura e pulizia nel file system può causare l'attivazione di un falso avviso da parte dell'algoritmo di previsione lineare.

Utilizzare gli strumenti e le utilità del sistema operativo Linux per analizzare le directory che occupano più spazio nel file system. Il problema è una condizione irregolare, ad esempio un processo che non riesce a ripulire dietro se stesso e utilizza una grande quantità di spazio? O il problema sembra essere legato alla crescita organica?

Per facilitare la diagnosi, osservare la seguente metrica in PromQL (eseguire la query sulla console web OCP): Osservare le metriche → → eseguire query):

node_filesystem_free_bytes

Quindi, selezionare l'icona mountpoint Etichetta dell'avviso.

Mitigazione:

Se mountpoint l'etichetta è /, /sysroot oppure /var, rimuovere le immagini inutilizzate per risolvere il problema:

1.Eseguire il debug del nodo accedendo al file system del nodo:
$ NODE_NAME=< etichetta dell'istanza da alert>
$ oc -n default debug node/$NODE_NAME
$ chroot /host

2.Rimuovere le immagini penzolanti:
$ podman images -q -f dangling=true | xargs --no-run-if-empty podman rmi3.Rimuovere le immagini inutilizzate:
$ podman images

| grep -v -e registry.redhat.io -e "quay.io/openshift" -e registry.access.redhat.com -e docker-registry.usersys.redhat.com -e docker-registry.ops.rhcloud.com -e rhmap | xargs --no-run-if-empty podman rmi 2>/dev/null

4.Esci da debug:
$ exit
$ esci

Supporto:
se tutte le procedure precedenti non risolvono il problema, contattare il supporto tecnico Dell EMC per ulteriori indagini.