l'elenco degli oggetti bucket S3 viene ripetuto all'infinito utilizzando l'API ListObjects o ListObjectsV2

摘要: L'app S3 o s3cmd utilizza l'API S3 listobject o listobjectv2 per eseguire query sugli oggetti dal bucket s3, in alcuni casi limite, Powerscale OneFS s3 restituisce un risultato errato se dirCache è presente ma non soddisfa la richiesta, l'app S3 si blocca a causa del ciclo infinito degli oggetti dell'elenco. ...

本文适用于 本文不适用于 本文并非针对某种特定的产品。 本文并非包含所有产品版本。
查看其他资源

症状

L'app S3 si blocca perché un bucket non può essere completato.
Il bucket ls s3cmd ottiene ripetutamente gli stessi oggetti restituiti in un elenco impaginato.

原因

Questo potrebbe causare un bug della cache s3# PSCALE-217613. 
 
Se il client richiede ListObjects con max entry = 1000, internamente otteniamo 10.000 voci (se la directory è molto ampia) e ne restituiamo 1000 al client, quindi riutilizziamo le restanti 9000 per una richiesta futura. Alla richiesta successiva, se è presente una cache e sono ancora presenti file nella directory che non sono ancora restituiti al client e la cache corrente non dispone di voce sufficiente per soddisfare la richiesta, si verifica un bug e viene restituito un risultato errato.

解决方案

I tecnici stanno lavorando alla correzione permanente e la patch RUP verrà rilasciata una volta pronta. 
La soluzione alternativa corrente consiste nel configurare temporaneamente s3 ls DIR_CACHE_TTL a 0:  
# isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl on 0"

Nel caso in cui il processo s3 o un nodo si riavvii, applicare nuovamente la soluzione alternativa sul nodo poiché è stato ripristinato al valore predefinito 1 ora dopo il riavvio di s3. 
Per disattivare il manuale DIR_CACHE_TTL:  
#isi_for_array -X  "/usr/likewise/bin/lwsm inject s3 s3_ls_set_dir_cache_ttl off"

受影响的产品

Isilon, PowerScale
文章属性
文章编号: 000223936
文章类型: Solution
上次修改时间: 11 6月 2024
版本:  3
从其他戴尔用户那里查找问题的答案
支持服务
检查您的设备是否在支持服务涵盖的范围内。