l'elenco degli oggetti bucket S3 viene ripetuto all'infinito utilizzando l'API ListObjects o ListObjectsV2

Podsumowanie: L'app S3 o s3cmd utilizza l'API S3 listobject o listobjectv2 per eseguire query sugli oggetti dal bucket s3, in alcuni casi limite, Powerscale OneFS s3 restituisce un risultato errato se dirCache è presente ma non soddisfa la richiesta, l'app S3 si blocca a causa del ciclo infinito degli oggetti dell'elenco. ...

Ten artykuł dotyczy Ten artykuł nie dotyczy Ten artykuł nie jest powiązany z żadnym konkretnym produktem. Nie wszystkie wersje produktu zostały zidentyfikowane w tym artykule.

Objawy

L'app S3 si blocca perché un bucket non può essere completato.
Il bucket ls s3cmd ottiene ripetutamente gli stessi oggetti restituiti in un elenco impaginato.

Przyczyna

Questo potrebbe causare un bug della cache s3# PSCALE-217613. 
 
Se il client richiede ListObjects con max entry = 1000, internamente otteniamo 10.000 voci (se la directory è molto ampia) e ne restituiamo 1000 al client, quindi riutilizziamo le restanti 9000 per una richiesta futura. Alla richiesta successiva, se è presente una cache e sono ancora presenti file nella directory che non sono ancora restituiti al client e la cache corrente non dispone di voce sufficiente per soddisfare la richiesta, si verifica un bug e viene restituito un risultato errato.

Rozwiązanie

I tecnici stanno lavorando alla correzione permanente e la patch RUP verrà rilasciata una volta pronta. 
La soluzione alternativa corrente consiste nel configurare temporaneamente s3 ls DIR_CACHE_TTL a 0: 
# isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl on 0"

Nel caso in cui il processo s3 o un nodo si riavvii, applicare nuovamente la soluzione alternativa sul nodo poiché è stato ripristinato al valore predefinito 1 ora dopo il riavvio di s3. 
Per disattivare il manuale DIR_CACHE_TTL
#isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl off"

Produkty, których dotyczy problem

Isilon, PowerScale
Właściwości artykułu
Numer artykułu: 000223936
Typ artykułu: Solution
Ostatnia modyfikacja: 11 cze 2024
Wersja:  3
Znajdź odpowiedzi na swoje pytania u innych użytkowników produktów Dell
Usługi pomocy technicznej
Sprawdź, czy Twoje urządzenie jest objęte usługą pomocy technicznej.