ECS:S3プロトコルの500エラーで大容量ファイルの書き込みが失敗する
摘要: 大容量ファイルの書き込みが、S3プロトコルの500エラーで失敗します。
本文章適用於
本文章不適用於
本文無關於任何特定產品。
本文未識別所有產品版本。
症狀
S3プロトコルを使用した大容量ファイル(数GB以上)の書き込みが500エラーで失敗します。
原因
「HTTP PUT」または「HTTPS PUT」を使用して、ECSにファイルを書き込みます。S3 PUTコマンドはオブジェクトを部分的に追加しません。リクエストは書き込みの成功または失敗(すべてまたはゼロ)のいずれかです
「オール・オア・ナッシング」操作であるため、大容量ファイルのデータ転送中に中断が発生すると、その書き込みは完全に失敗します。この失敗に対する唯一の手段は、書き込み処理全体を再試行し、次回の試行で成功することを祈ることです。
「オール・オア・ナッシング」操作であるため、大容量ファイルのデータ転送中に中断が発生すると、その書き込みは完全に失敗します。この失敗に対する唯一の手段は、書き込み処理全体を再試行し、次回の試行で成功することを祈ることです。
解析度
大容量ファイル(GB以上)の場合は、PUT操作の代わりにマルチパート アップロード(MPU)を使用することをお勧めします。この推奨事項は、長い書き込み完了時間(AWSのベスト プラクティスに従って100MB以上)を回避するために行われます
例:
80GBのファイルがチャンク化され、各チャンクがECSに送信されます。いずれかのパーツのアップロードが失敗した場合は、オブジェクト全体ではなく、単一のパーツのアップロードのみが再試行されます。
MPUの動作はマルチスレッド化できるため、MPUのパフォーマンスは単一の大規模なPUTよりも優れていると予想されます。その結果、MPUを使用すると、複数の接続と帯域幅をより有効に活用できます。つまり、複数のパーツを同時に送信できるため、大容量ファイルの書き込み時の全体的なパフォーマンスが向上します。
例:
80GBのファイルがチャンク化され、各チャンクがECSに送信されます。いずれかのパーツのアップロードが失敗した場合は、オブジェクト全体ではなく、単一のパーツのアップロードのみが再試行されます。
MPUの動作はマルチスレッド化できるため、MPUのパフォーマンスは単一の大規模なPUTよりも優れていると予想されます。その結果、MPUを使用すると、複数の接続と帯域幅をより有効に活用できます。つまり、複数のパーツを同時に送信できるため、大容量ファイルの書き込み時の全体的なパフォーマンスが向上します。
其他資訊
PUT から MPU に切り替えるアプリケーション開発者向けのリソース:
TransferManager (AWS SDK for Java - 1.12.588) (amazon.com)
AWS MPUの概要: (MPUのベスト プラクティスを含む)
マルチパートアップロードを使用したオブジェクトのアップロードとコピー - Amazon Simple Storage Service
受影響的產品
ECS Appliance產品
ECS Appliance文章屬性
文章編號: 000048288
文章類型: Solution
上次修改時間: 08 9月 2025
版本: 5
向其他 Dell 使用者尋求您問題的答案
支援服務
檢查您的裝置是否在支援服務的涵蓋範圍內。