Код події Openshift: 1038CLST0008
Summary: PersistentVolumeInodes заповнюються.
Symptoms
The KubePersistentVolumeInodesFillingUp Сповіщення спрацьовує, коли у постійному томі в одному з системних просторів імен залишилося менше 3% виділених INOD. Простори імен систем включають default і ті, що мають назви, що починаються на літеру openshift- або kube-.
Значне використання inode компонентом системи, ймовірно, завадить його нормальній роботі. Значне використання inode також може призвести до часткового або повного збою кластера.
Cause
Причин, чому обсяг заповнюється, можуть бути різноманітні. Ця база не охоплює специфічні причини застосування, лише компенсації для об'ємів, які дійсно заповнюються.
Як завжди, ознайомтеся з рекомендованими сценаріями для певної служби.
Resolution
Діагностика
Мітки сповіщень містять назву постійного об'єму (PVC), пов'язаного з обмеженням обсягу пам'яті. На етикетках також вказано простір назв, у яких розташований ПВХ. Використайте цю інформацію для графіка доступного сховища у веб-консолі OpenShift (Спостерігати → метрики → запускати запити).
Нижче наведено приклад запиту для ПВХ, пов'язаного з екземпляром Prometheus, у просторі імен openshift-monitoring:
kubelet_volume_stats_inodes_used{
namespace="openshift-monitoring",
persistentVolumeclaim="Прометей-K8S-DB-Прометей-K8S-0"
}
|
Ви можете вручну перевірити стан тому, щоб визначити, який каталог споживає велику кількість inode:
$ PVC_NAME='<PersistentVolumeclaim Label з сповіщення>' $ NAMESPACE='<мітка простору імен з сповіщення>' $ OC -n $NAMESPACE описати ПВХ $PVC_NAME $ POD_NAME='<"Використано:" поле з наведеного вище результату>' $ oc -n $NAMESPACE rsh $POD_NAME $ cd /path/to/pvc-mount $ Іс -лі . $ stat |
Пом'якшення наслідків
Вирішення цієї проблеми залежить від загальної кількості файлів, каталогів і символічних посилань. Ви не можете збільшити кількість inode у файловій системі після її створення. Однак ви можете налаштувати конфігурацію компонента за допомогою тома так, щоб він створював менше файлів, каталогів і символічних посилань.
Підтримка
Якщо всі вищезазначені кроки не допоможуть вирішити проблему, зверніться до технічної підтримки Dell EMC для подальшого розслідування.