OneFS: Tapahtumailmoitus: Solmun juuritiedostojärjestelmän käyttökapasiteetti on vähintään 95 prosenttia
Summary: Vanhemmissa Isilon IQ X- ja NL-sarjan solmuissa juurihakemiston (/) enimmäiskoko on 500 Mt ja se näyttää vähintään 95 % käytetystä kapasiteetista. Näin tapahtuu, vaikka ylimääräisiä käyttäjätiedostoja tai laiteohjelmistopaketteja ei olisi asennettu. Uudemmissa solmuissa on juurihakemistoja, joiden koko on 1 Gt ja joissa käytetään tavallisesti 49 % käytettyä kapasiteettia. ...
Symptoms
Tapahtuma
Node reached 95% used capacity on the root file system.
-Tai-
The root partition is near capacity.
Event ID: 100010003
Cause
Tiedot
Tämä tapahtuma osoittaa, että yhden tai useamman solmun juuriosio lähestyy täyttä kapasiteettia.
Tähän tapahtumaan voi olla useita syitä. Kaksi yleisintä syytä ovat:
- Käyttäjä on siirtänyt tiedoston määrittämättömään juurihakemistoon /ifs-hakemiston sijaan.
- Solmun laiteohjelmisto päivitettiin, mutta laiteohjelmistopakettia ei poistettu.
Resolution
Reagointi
Tee hälytyksen syyn vianmääritys yhdellä tai useammalla seuraavista tavoista.
TÄRKEÄ!
Älä poista tai asenna ohjelmistokorjauksia, kun juuriosio on täynnä tai lähes täynnä. Jos korjaustiedosto yritetään asentaa tai poistaa juuriosion ollessa täynnä, korjaustiedoston asennus tai poistoprosessi saattaa epäonnistua. Jos asennus tai poisto epäonnistuu klusterissa, jossa on täysi juuriosio, tämä saattaa estää palaamisen edelliseen järjestelmäkokoonpanoon. Tämä tilanne voi jättää klusterin epävakaaseen tai saavuttamattomaan tilaan.
Lisätietoja riittävän tilan ylläpitämisestä Isilon-klusterissa on Dellin verkkotukisivuston klusterikapasiteetin hallintaoppaassa .
Vaihe 1: Poista tiedostot, jotka eivät kuulu juurihakemistoon (/).
- Tarkista ilmoitussanomasta, mitä tiedostojärjestelmää ongelma koskee. Sanoma tunnistaa klusterin ja solmut (solmun numeron perusteella), jotka aiheuttivat hälytyksen. Sanoma tunnistaa myös ongelmallisen tiedostojärjestelmän joksikin seuraavista: ifs, var, crash tai root.
- Suorita seuraava komento, joka luettelee kaikki yli 5 megatavun kokoiset juurihakemiston tiedostot:
find -x / -type f -size +10000 -exec ls -lh {} \; | awk '{ print $9 ": " $5 }'
Seuraavankaltainen tulos tulee näkyviin:
/boot/kernel.amd64/efs.ko: 10M /usr/libexec/cc1: 6.6M /usr/libexec/cc1plus: 7.2M /usr/libexec/cc1obj: 6.6M /usr/local/lib/libxerces-c-3.1.so: 5.6M /usr/local/lib/libxerces-c.so: 5.6M /usr/local/sbin/nmbd: 9.9M /usr/local/connectemc/connectemc: 15M /usr/local/aspera/sbin/asperacentral: 5.0M
Yllä olevassa esimerkkituloksessa luetellaan tiedostot, jotka yleensä sijaitsevat juurihakemistossa. Näitä tiedostoja ei pidä poistaa.
- Etsi tuloksesta tiedostoja, jotka eivät tavallisesti kuulu juurihakemistoon. Esimerkiksi OneFS-asennustiedosto, lokin keräykset tai käyttäjän luomat tiedostot. (Katso edellisen vaiheen esimerkkituloksesta tiedostot, jotka kuuluvat juurihakemistoon ja joita ei pidä poistaa.)
- Poista tiedostot tai siirrä ne /ifs-hakemistoon. Jos et ole varma poistettavista tiedostoista, ota yhteyttä Isilonin tekniseen tukeen.
Varmista seuraavalla komennolla, että juurihakemisto (/) on varoituskynnyksen alapuolella:
isi_for_array -s 'df -h /'
Seuraavankaltainen tulos tulee näkyviin:
Filesystem Size Used Avail Capacity Mounted on /dev/imdd0a 496M 445M 11M 94% /
- Poista kaikki olemassa olevat hälytykset:
isi event bulk --resolved=true (OneFS 8.0 or newer) -or- isi events cancel all (OneFS 7.x or older)
- Jos tilaa ei palauteta suurten tiedostojen poistamisen jälkeen, etsi prosessi, jossa tiedosto on edelleen avoinna. Tämä prosessi on pysäytettävä tilaa pitävän tiedostokahvan sulkemiseksi. Katso Solmun avoimien tiedostojen luettelointi fstat-komennolla, artikkeli 322712.
- Jos ongelma ei ratkea, siirry vaiheeseen 2.
Vaihe 2: Isilon-solmun laiteohjelmistopakettien poistaminen.
Isilon-solmun laiteohjelmistopakettien mukana tulevat ohjeet sisältävät vaiheen, jonka avulla laiteohjelmistopaketti poistetaan laiteohjelmiston asentamisen jälkeen. Jos tätä vaihetta ei suoriteta, juurihakemisto saattaa ylittää kapasiteetin.
- Varmista seuraavalla komennolla, että klusteriin on asennettu laiteohjelmistopaketti:
isi upgrade patches list (OneFS 8.0 or newer) -or- isi pkg info (OneFS 7.x or older)
Seuraavankaltainen tulos tulee näkyviin:
IsiFw_Package_v8.2: Isilon firmware packages contain firmware images that may be used to update certain devices in your cluster. To install this firmware package, use the 'isi pkg install <package-filename>' command. Note that the act of installing the package will not automatically update your devices. Once installed, please refer to 'isi firmware --help' or the firmware section in 'man isi' for more information.
- Poista laiteohjelmistopäivityspaketti, jossa <package-filename> tai <patch> on laiteohjelmistopaketin tiedostonimen nimi:
isi upgrade patches uninstall --patch=<patch> (OneFS 8.0 or newer) -or- isi pkg delete <package-filename> (OneFS 7.x or older)
- Tarkista seuraavalla komennolla, että juurihakemisto on hälytyskynnyksen alapuolella:
isi_for_array -s 'df -h /'
Seuraavankaltainen tulos tulee näkyviin:
mycluster-1: Filesystem Size Used Avail Capacity Mounted on mycluster-1: /dev/imdd0a 496M 445M 11M 97% / mycluster-2: Filesystem Size Used Avail Capacity Mounted on mycluster-2: /dev/imdd0a 496M 445M 12M 97% / mycluster-3: Filesystem Size Used Avail Capacity Mounted on mycluster-3: /dev/imdd0a 496M 445M 12M 97% /
- Poista kaikki olemassa olevat hälytykset:
isi event bulk --resolved=true (OneFS 8.0 or newer) -or- isi events cancel all (OneFS 7.x or older)
- Jos ongelma ei ratkea, siirry vaiheeseen 3.
Vaihe 3: Ota yhteys Isilonin tekniseen tukeen
Jos et pysty selvittämään, miksi juurihakemisto (/) on lähellä kapasiteettia tai sen yläpuolella, toimi seuraavasti:
- Kerää järjestelmälokit suorittamalla seuraava komento:
isi_gather_info -s 'ls -lhat /' -s 'du -axh / | sort -rn' -s 'du -xhd1 /'
Lokit ladataan automaattisesti Dellin tekniseen tukeen.
- Ota yhteyttä Dellin tekniseen tukeen ongelman vianmääritystä varten.