Código do evento Openshift: 1038NODE0006

O sistema de arquivos de um nó ficar cheio pode ter um impacto negativo generalizado. O problema pode fazer com que um ou todos os aplicativos agendados para esse nó experimentem alguma coisa, desde desempenho degradado até se tornar totalmente inoperante,

Dependendo do nó e do file system envolvidos, esse problema pode representar uma ameaça crítica à estabilidade de um cluster.

A coluna NodeFilesystemFilesFillingUp é semelhante ao alerta NodeFilesystemSpaceFillingUp, mas prevê que o file system ficará sem inodes em vez de bytes de espaço de armazenamento.

O alerta é acionado em critical Nível em que há previsão de que o file system ficará sem inodes disponíveis em quatro horas.

Diagnóstico

Observe o instance e mountpoint Rótulos do alerta. Você pode representar graficamente o histórico de uso desse file system usando a seguinte consulta no console da Web do OpenShift (Observe → Metrics → Run queries):

node_filesystem_files_free{
  instance="<valor do rótulo da instância do alerta>",
  mountpoint="<valor do rótulo do ponto de montagem do alerta>"
}

Você também pode abrir uma sessão de depuração no nó e usar utilitários padrão do Linux para localizar a origem do uso:

$ MOUNT_POINT='<valor do rótulo do ponto de montagem do alerta>'
$ NODE_NAME='<valor do rótulo da instância do alerta>'

$ oc depuração "node/$NODE_NAME"
$ df -oi "/host/$MOUNT_POINT"

Observe que, em muitos casos, um file system que está ficando sem inodes ainda terá armazenamento disponível. Geralmente, a falta de inodes é causada quando um aplicativo cria muitos arquivos pequenos.

Mitigação

O número de inodes alocados a um file system geralmente é baseado no tamanho do armazenamento. Você pode resolver o problema ou, pelo menos, retardar o impacto negativo do problema aumentando o tamanho do volume de armazenamento. Caso contrário, determine o aplicativo que está criando um grande número de arquivos pequenos e, em seguida, ajuste sua configuração ou forneça-lhe armazenamento dedicado.

Serviço de suporte

Se todas as etapas acima não puderem resolver o problema, entre em contato com o suporte técnico da Dell EMC para investigar mais.