S3-säilöobjektien luettelointisilmukat loputtomasti ohjelmointirajapinnan, ListObjectsin tai ListObjectsV2:n avulla

Zhrnutie: S3-sovellus tai s3cmd käyttää S3-ohjelmointirajapintaa listobject tai listobjectv2 kyselyyn objekteja s3-säilöstä, joissakin kulmatapauksissa Powerscale OneFS s3 palauttaa väärän tuloksen, jos dirCache on olemassa, mutta se ei täytä pyyntöä, S3-sovellus jumittuu, koska luettelo-objektit osuvat äärettömään silmukkaan. ...

Tento článok sa vzťahuje na Tento článok sa nevzťahuje na Tento článok nie je viazaný na žiadny konkrétny produkt. V tomto článku nie sú uvedené všetky verzie produktov.
Pozrite si ďalšie zdroje

Symptómy

S3-sovellus vain jumittuu, koska luettelointia ei voida suorittaa loppuun.
S3cmd ls bucket saa toistuvasti samat objektit palautettua sivutettuun luetteloon.

Príčina

Tämä saattaa osua s3-välimuistivirheeseen# PSCALE-217613. 
 
Jos asiakas pyytää ListObjects-kohteita, joiden enimmäismerkintä on = 1000, sisäisesti saamme 10 000 merkintää (jos hakemisto on hyvin laaja) ja palautamme niistä 1000 asiakkaalle, sitten käytä loput 9000 uudelleen tulevaa pyyntöä varten. Seuraavassa pyynnössä, jos välimuisti on ja hakemistossa on edelleen tiedostoja, joita ei ole vielä palautettu asiakkaalle, ja nykyisessä välimuistissa ei ole tarpeeksi merkintää pyynnön täyttämiseksi, osumme virheeseen ja palautamme väärän tuloksen.

Riešenie

Suunnittelu työskentelee pysyvän korjauksen parissa, ja RUP-korjaustiedosto julkaistaan, kun se on valmis. 
Nykyinen kiertotapa on määrittää s3 ls DIR_CACHE_TTL arvoon 0 väliaikaisesti:  
# isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl on 0"

Jos s3-prosessi käynnistyy uudelleen tai solmu käynnistyy uudelleen, käytä kiertotapaa uudelleen solmussa, koska se on palautettu oletusarvoon 1 tunti, kun s3 käynnistettiin uudelleen. 
Voit poistaa manuaalisen käytöstä DIR_CACHE_TTL:  
#isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl off"

Dotknuté produkty

Isilon, PowerScale
Vlastnosti článku
Číslo článku: 000223936
Typ článku: Solution
Dátum poslednej úpravy: 11 jún 2024
Verzia:  3
Nájdite odpovede na svoje otázky od ostatných používateľov spoločnosti Dell
Služby podpory
Skontrolujte, či sa na vaše zariadenie vzťahujú služby podpory.