liste over S3-bucketobjekter, sløjfer uendeligt ved hjælp af API ListObjects eller ListObjectsV2

Podsumowanie: S3 App eller s3cmd bruger S3 API listobject eller listobjectv2 til at forespørge objekter fra s3-bucket, i nogle hjørnetilfælde returnerer PowerScale OneFS s3 forkert resultat, hvis dirCache er der, men det opfylder ikke anmodningen, S3-appen hænger på grund af listeobjekter, der rammer uendelig løkke. ...

Ten artykuł dotyczy Ten artykuł nie dotyczy Ten artykuł nie jest powiązany z żadnym konkretnym produktem. Nie wszystkie wersje produktu zostały zidentyfikowane w tym artykule.
Sprawdź inne zasoby

Objawy

S3 App hænger bare på grund af notering af en spand kan ikke fuldføre.
S3cmd ls bucket gentagne gange få de samme objekter returneret i en sideinddelt liste.

Przyczyna

Dette kan ramme en s3-cachefejl # PSCALE-217613. 
 
Hvis klienten anmoder om ListObjects med maksimal post = 1000, får vi internt 10.000 poster (hvis mappen er meget bred) og returnerer 1000 af dem til klienten og genbruger derefter de resterende 9000 til fremtidig anmodning. Ved næste anmodning, hvis der er en cache, og der stadig er filer under mappen, som endnu ikke er returneret til klienten, og den aktuelle cache ikke har nok adgang til at opfylde anmodningen, rammer vi en fejl og returnerer forkert resultat.

Rozwiązanie

Teknikerne arbejder på den permanente rettelse, og RUP-programrettelsen frigives, når den er klar. 
Den nuværende løsning er midlertidigt at konfigurere s3 ls DIR_CACHE_TTL til 0:  
# isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl on 0"

Hvis s3-processen genstarter, eller en node genstarter, skal du anvende løsningen igen på noden, da den er blevet vendt tilbage til standard 1 time, når s3 genstartes. 
Sådan slår du manuel fra DIR_CACHE_TTL:  
#isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl off"

Produkty, których dotyczy problem

Isilon, PowerScale
Właściwości artykułu
Numer artykułu: 000223936
Typ artykułu: Solution
Ostatnia modyfikacja: 11 cze 2024
Wersja:  3
Znajdź odpowiedzi na swoje pytania u innych użytkowników produktów Dell
Usługi pomocy technicznej
Sprawdź, czy Twoje urządzenie jest objęte usługą pomocy technicznej.