OpenShift-händelsekod: 1038NODE0006
Résumé: Filsystemet förutspås få slut på inoder inom de närmaste 4 timmarna.
Symptômes
Att en nods filsystem blir fullt kan ha en omfattande negativ inverkan. Problemet kan leda till att något eller alla program som är schemalagda till den noden upplever allt från försämrad prestanda till att bli helt obrukbara.
Beroende på vilken nod och vilket filsystem som är inblandat kan det här problemet utgöra ett kritiskt hot mot stabiliteten i ett kluster.
Cause
Informationen NodeFilesystemFilesFillingUp alert liknar aviseringen NodeFilesystemSpaceFillingUp, men förutsäger att filsystemet får slut på inoder i stället för byte lagringsutrymme.
Aviseringen utlöses vid en critical nivå när filsystemet förutspås få slut på tillgängliga inoder inom fyra timmar.
Résolution
Diagnos
Observera att instance och mountpoint etiketter från aviseringen. Du kan visa användningshistoriken för det här filsystemet med hjälp av följande fråga i OpenShift-webbkonsolen (Observera → mått → kör frågor):
node_filesystem_files_free{
instance="<värdet på instansetiketten från aviseringen>",
MountPoint="<Värdet på MountPoint-etiketten från aviseringen>"
} |
Du kan också öppna en felsökningssession på noden och använda Linux-standardverktyg för att hitta källan till användningen:
$ MOUNT_POINT='<Värde på monteringspunktsetikett från varning>' $ NODE_NAME='<Värdet på instansetiketten från avisering>' $ oc debug "node/$NODE_NAME" $ df -hi "/host/$MOUNT_POINT" |
Observera att i många fall kommer ett filsystem som håller på att få slut på inoder fortfarande att ha tillgängligt lagringsutrymme. Att inoder tar slut orsakas ofta när ett program skapar många små filer.
Lindring
Antalet inoder som allokeras till ett filsystem baseras vanligtvis på lagringsstorleken. Du kanske kan lösa problemet, eller åtminstone fördröja den negativa effekten av problemet, genom att öka storleken på lagringsvolymen. I annat fall kan du ta reda på vilket program som skapar ett stort antal små filer och sedan antingen justera dess konfiguration eller ge det dedikerad lagring.
Support
Om inget av stegen ovan kan lösa problemet kontaktar du Dell EMC:s tekniska support för vidare undersökning.