Openshift Event Code: 1038NODE0006

En nodes filsystem som blir fullt kan ha en utbredt negativ innvirkning. Problemet kan føre til at noen eller alle applikasjonene som er planlagt til denne noden, opplever alt fra redusert ytelse til å bli fullstendig ubrukelig.

Dette problemet kan, avhengig av noden og filsystemet som er involvert, utgjøre en kritisk trussel mot stabiliteten til en klynge.

Informasjonen i NodeFilesystemFilesFillingUp varselet ligner på NodeFilesystemSpaceFillingUp-varselet, men spår at filsystemet vil gå tom for inoder i stedet for byte lagringsplass.

Varselet utløses ved en critical nivå når filsystemet forventes å gå tom for tilgjengelige inoder innen fire timer.

Diagnose

Legg merke til instance og mountpoint etiketter fra varselet. Du kan lage diagrammer av bruksloggen for dette filsystemet ved hjelp av følgende spørring i OpenShift-nettkonsollen (Observe → Metrics → Run-spørringer):

node_filesystem_files_free{
  instance="<verdi for forekomstetikett fra varsel>",
  MountPoint = "<Verdien av MountPoint-etiketten fra varselet>"
}

Du kan også åpne en feilsøkingsøkt på noden og bruke standard Linux-verktøy for å finne kilden til bruken:

$ MOUNT_POINT='<verdien av MountPoint-etiketten fra varselet>'
$ NODE_NAME='<verdien av forekomstetiketten fra varselet>'

$ oc debug "node/$NODE_NAME"
$ df -hei "/ host / $MOUNT_POINT"

Merk at i mange tilfeller vil et filsystem som går tom for inoder fortsatt ha tilgjengelig lagringsplass. Å gå tom for inoder er ofte forårsaket når et program oppretter mange små filer.

Klimatiltak

Antall inoder som er tildelt et filsystem, er vanligvis basert på lagringsstørrelsen. Du kan kanskje løse problemet, eller i det minste forsinke den negative effekten av problemet, ved å øke størrelsen på lagringsvolumet. Ellers bestemmer du programmet som oppretter et stort antall små filer, og justerer deretter konfigurasjonen eller gir den dedikert lagring.

Support

Hvis alle trinnene ovenfor ikke kan løse problemet, kontakter du teknisk støtte hos Dell EMC for videre undersøkelser.