Código de evento de OpenShift: 1038NODO0006
Résumé: Se prevé que el sistema de archivos se quedará sin inodos en las próximas 4 horas.
Symptômes
El hecho de que el sistema de archivos de un nodo se llene puede tener un impacto negativo generalizado. El problema puede provocar que alguna o todas las aplicaciones programadas para ese nodo experimenten desde un rendimiento degradado hasta volverse completamente inoperables.
Según el nodo y el sistema de archivos involucrados, este problema puede representar una amenaza crítica para la estabilidad de un clúster.
Cause
La variable NodeFilesystemFilesFillingUp alert es similar a la alerta NodeFilesystemSpaceFillingUp, pero predice que el sistema de archivos se quedará sin inodos en lugar de bytes de espacio de almacenamiento.
La alerta se activa en un critical cuando se predice que el sistema de archivos se quedará sin inodos disponibles en un plazo de cuatro horas.
Résolution
Diagnóstico
Tenga en cuenta que el instance y mountpoint de la alerta. Puede representar gráficamente el historial de uso de este sistema de archivos mediante la siguiente consulta en la consola web de OpenShift (Observe → métricas → ejecute consultas):
node_filesystem_files_free{
instance="<valor de la etiqueta de instancia de la alerta>",
mountpoint="<valor de la etiqueta mountpoint de la alerta>"
} |
También puede abrir una sesión de depuración en el nodo y usar las utilidades estándar de Linux para localizar el origen del uso:
$ MOUNT_POINT='<valor de la etiqueta de punto de montaje de la alerta>' $ NODE_NAME='<valor de la etiqueta de instancia de la alerta>' $ oc debug "node/$NODE_NAME" $ df -hi "/host/$MOUNT_POINT" |
Tenga en cuenta que, en muchos casos, un sistema de archivos que se está quedando sin inodos aún tendrá almacenamiento disponible. A menudo, el agotamiento de inodos se produce cuando una aplicación crea muchos archivos pequeños.
Mitigación
Por lo general, la cantidad de inodos asignados a un sistema de archivos se basa en el tamaño del almacenamiento. Es posible que pueda resolver el problema, o al menos retrasar el impacto negativo del problema, aumentando el tamaño del volumen de almacenamiento. De lo contrario, determine la aplicación que está creando una gran cantidad de archivos pequeños y, a continuación, ajuste su configuración o proporciónele almacenamiento dedicado.
Soporte
Si todos los pasos anteriores no pueden resolver el problema, póngase en contacto con el soporte técnico de Dell EMC para una investigación más detallada.