Openshift Olay Kodu: 1030DÜĞÜM0005

Bir düğümün dosya sisteminin dolu hale gelmesi yaygın bir olumsuz etkiye sahip olabilir. Bu sorun, söz konusu düğüm için zamanlanmış uygulamaların herhangi birinin veya tümünün düşük performanstan tamamen çalışmaz hale gelmeye kadar her şeyle karşılaşmasına neden olabilir.

İlgili düğüme ve dosya sistemine bağlı olarak bu sorun, kümenin kararlılığı için kritik bir tehdit oluşturabilir.

NodeFilesystemAlmostOutOfSpace uyarısı, NodeFilesystemSpaceFillingUp uyarısına benzer, ancak bir dosya sisteminin belirli bir süre içinde dolacağı tahminine dayanmak yerine basit statik eşikler kullanır.

Bu uyarı, dosya sisteminde %5 alan kaldığında uyarı düzeyinde, %3 alan kaldığında ise kritik düzeyde tetiklenir.

Teşhis:
Bir gösterge tablosunda dosya sistemi kullanımının son eğilimlerini inceleyin. Bazen, dosya sisteminde periyodik bir yazma ve temizleme örüntüsü, doğrusal tahmin algoritmasının yanlış bir uyarı tetiklemesine neden olabilir.

Dosya sisteminde hangi dizinlerin en fazla alanı kullandığını araştırmak için Linux işletim sistemi araçlarını ve yardımcı programlarını kullanın. Sorun, bir işlemin kendi kendini temizleyememesi ve çok fazla alan kullanması gibi düzensiz bir durum mu? Yoksa mesele organik büyüme ile mi ilgili görünüyor?

Tanılamaya yardımcı olması için PromQL'de aşağıdaki ölçümü izleyin (sorguyu OCP web konsolunda yürütün: → Ölçümlerini gözlemleyin → Sorguları çalıştırın):

node_filesystem_free_bytes

Ardından, mountpoint etiketini kullanın.

Sorunu düzeltme:

Eğer mountpoint etiketi /, /sysroot veya /var, sorunu çözmek için kullanılmayan resimleri kaldırın:

1.Düğüm dosya sistemine erişerek düğümde hata ayıklayın:
$ NODE_NAME=<alert
>$ oc -n default debug node/$NODE_NAME
$ chroot /host

2.Sarkan görüntüleri kaldırın:
$ podman görüntüleri -q -f dangling=true | xargs --no-run-if-empty podman rmi

3.Kullanılmayan resimleri kaldırın:
$ podman resimleri | grep -v -e registry.redhat.io -e "quay.io/openshift" -e registry.access.redhat.com -e docker-registry.usersys.redhat.com -e docker-registry.ops.rhcloud.com -e rhmap | xargs --no-run-if-empty podman rmi 2>/dev/null

4.Exit debug:
$ exit
$ exit

Destek:
Yukarıdaki adımların tümü sorunu çözemezse daha fazla araştırma için Dell EMC teknik destek ile iletişime geçin.