výpis smyček objektů kbelíku S3 donekonečna pomocí rozhraní API ListObjects nebo ListObjectsV2

Résumé: Aplikace S3 nebo nástroj s3cmd používá rozhraní API S3 listobject nebo listobjectv2 k dotazování objektů z kbelíku s3. V některých vzácných případech vrátí systém Powerscale OneFS s3 nesprávný výsledek, pokud je k dispozici složka dirCache, ale požadavek nesplní, aplikace S3 zamrzne, protože objekty seznamu narazí do nekonečné smyčky. ...

Cet article concerne Cet article ne concerne pas Cet article n’est associé à aucun produit spécifique. Toutes les versions du produit ne sont pas identifiées dans cet article.

Symptômes

Aplikace S3 právě zamrzne kvůli uvedení, kbelík nelze dokončit.
Kbelík S3cmd ls opakovaně vrací stejné objekty ve stránkovaném seznamu.

Cause

Může se jednat o chybu # mezipaměti s3 PSCALE-217613. 
 
Pokud klient požaduje ListObjects s maximální položkou = 1000, interně dostaneme 10 000 položek (pokud je adresář velmi široký) a vrátíme 1000 z nich klientovi, pak znovu použijeme zbývajících 9000 pro budoucí požadavek. Při dalším požadavku, pokud existuje mezipaměť a v adresáři jsou stále soubory, které ještě nejsou vráceny klientovi, a aktuální mezipaměť nemá dostatek záznamů pro splnění požadavku, narazíme na chybu a vrátíme špatný výsledek.

Résolution

Technický tým pracuje na trvalé opravě a oprava RUP bude vydána, jakmile bude připravena. 
Aktuální zástupné řešení spočívá v dočasné konfiguraci s3 ls DIR_CACHE_TTL na 0: 
# isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl on 0"

V případě, že se proces s3 restartuje nebo se uzel restartuje, použijte na uzel znovu zástupné řešení, protože po restartování s3 se vrátil zpět na výchozí hodnotu po 1 hodině. 
Vypnutí ručního DIR_CACHE_TTL
#isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl off"

Produits concernés

Isilon, PowerScale
Propriétés de l’article
Numéro d’article: 000223936
Type d’article: Solution
Dernière modification: 11 juin 2024
Version:  3
Trouvez des réponses à vos questions auprès d’autres utilisateurs Dell
Services de support
Vérifiez si votre appareil est couvert par les services de support.