OpenShift 이벤트 코드: 1038CLST0007년

이 알림은 시스템 네임스페이스 중 하나에 있는 영구 볼륨이 총 공간의 3% 미만일 때 발생합니다. 시스템 네임스페이스에는 default 및 openshift- 또는 kube-로 시작하는 이름이 있는 네임스페이스가 포함됩니다.

시스템 구성 요소에서 사용하는 영구 볼륨이 꽉 차면 구성 요소가 정상적으로 작동하지 않을 수 있습니다. 전체 영구 볼륨은 부분 또는 전체 클러스터 운영 중단으로 이어질 수도 있습니다.

볼륨이 가득 차는 이유는 다양할 수 있습니다. 이 KB는 애플리케이션별 이유에 대해서는 다루지 않으며, 정상적으로 채워지는 볼륨에 대한 완화 정보만 다룹니다.

항상 그렇듯이 주어진 서비스에 대한 권장 시나리오를 참조하십시오.

진단:
알림 레이블에는 스토리지 부족 볼륨과 관련된 PVC(Persistent Volume Claim)의 이름이 포함됩니다. 레이블에는 PVC가 있는 네임스페이스도 포함됩니다. 이 정보를 사용하여 OpenShift 웹 콘솔에서 사용 가능한 스토리지를 그래프로 표시합니다(→ 메트릭 관찰 → 쿼리 실행).

다음은 openshift-monitoring 네임스페이스의 Prometheus 인스턴스와 연결된 PVC에 대한 예제 쿼리입니다.

kubelet_volume_stats_available_bytes{
namespace="openshift-monitoring",
persistentvolumeclaim="prometheus-k8s-db-prometheus-k8s-0"
}

볼륨의 내용을 수동으로 검사하여 스토리지를 사용 중인 항목을 확인할 수도 있습니다.
$ PVC_NAME='<persistentvolumeclaim label from alert>'
$ NAMESPACE='<네임스페이스 레이블 from alert>'
$ oc -n $NAMESPACE describe pvc $PVC_NAME
$ POD_NAME='<"Used By:" field from the above output>'

$ oc -n $NAMESPACE rsh $POD_NAME
$ df -h

완화:
이 문제에 대한 완화는 스토리지를 채우는 항목에 따라 달라집니다.


영향을 받는 볼륨에 더 많은 스토리지 공간을 할당하여 문제를 해결할 수 있습니다.

또한 구성 요소의 스토리지 공간 사용을 줄이기 위해 볼륨인 구성 요소의 구성을 조정해 볼 수 있습니다.   예를 들어 구성 요소에 대한 로그로 영구 볼륨을 채우는 경우 로그 수준을 변경하여 기록되는 정보가 줄어들어 로그에 필요한 공간도 줄일 수 있습니다.

지원:
위의 모든 단계를 수행해도 문제를 해결할 수 없는 경우 Dell EMC 기술 지원 부서에 문의하여 추가 조사를 받으십시오.