Kod zdarzenia Openshift: 1038CLST0007

Ten alert jest uruchamiany, gdy wolumin trwały w jednej z systemowych przestrzeni nazw ma mniej niż 3% całkowitej pojemności. Systemowe przestrzenie nazw obejmują domyślne i te, które mają nazwy zaczynające się od openshift- lub kube-.

Jeśli wolumin trwały używany przez składnik systemu zapełni się, jest mało prawdopodobne, aby składnik działał normalnie. Pełny wolumin trwały może również prowadzić do częściowej lub pełnej awarii klastra.

Powody, dla których wolumin się zapełnia, mogą być różne. Ten artykuł bazy wiedzy nie obejmuje przyczyn specyficznych dla aplikacji, a jedynie środki zaradcze dla woluminów, które są prawidłowo wypełniane.

Jak zawsze należy zapoznać się z zalecanymi scenariuszami dla danej usługi.

Diagnoza:
Etykiety alertów zawierają nazwę PVC (persistent volume claim) skojarzonego z tym, że w woluminie zaczyna brakować pamięci masowej. Etykiety zawierają również przestrzeń nazw, w której znajduje się substancja PVC. Użyj tych informacji, aby utworzyć wykres dostępnego magazynu w konsoli internetowej OpenShift (Obserwuj metryki → → Uruchamiaj zapytania).

Poniżej znajduje się przykładowe zapytanie dotyczące PVC skojarzonego z wystąpieniem Prometheus w przestrzeni nazw openshift-monitoring:

kubelet_volume_stats_available_bytes{
namespace="openshift-monitoring",
persistentvolumeclaim="prometheus-k8s-db-prometheus-k8s-0"
}

Możesz również ręcznie sprawdzić zawartość woluminu, aby określić, co korzysta z magazynu:
$ PVC_NAME='<persistentvolumeclaim label from alert>'
$ NAMESPACE='<namespace label from alert'
$ oc -n $NAMESPACE describe pvc $PVC_NAME
$ POD_NAME='<"Used by:" z powyższego output>'

$ oc -n $NAMESPACE rsh $POD_NAME
$ df -h

Mitigation:
Łagodzenie tego problemu zależy od tego, co zapełnia magazyn.


>Możesz spróbować przydzielić więcej miejsca do woluminu, którego dotyczy problem, aby rozwiązać problem.

Można również spróbować dostosować konfigurację składnika, który jest woluminem, tak aby wymagał mniej miejsca do magazynowania.   Jeśli na przykład dzienniki składnika wypełniają wolumin trwały, można zmienić poziom dziennika, tak aby rejestrowanych było mniej informacji i w związku z tym wymagane było mniej miejsca na dzienniki.

Pomoc techniczna:
jeśli wszystkie powyższe czynności nie rozwiążą problemu, skontaktuj się z działem pomocy technicznej firmy Dell EMC w celu dokładniejszego zbadania problemu.