ECS：S3プロトコルの500エラーで大容量ファイルの書き込みが失敗する
概要: 大容量ファイルの書き込みが、S3プロトコルの500エラーで失敗します。
この記事は次に適用されます：
この記事は次には適用されません：
この記事は、特定の製品に関連付けられていません。
すべての製品パージョンがこの記事に記載されているわけではありません。
現象
S3プロトコルを使用した大容量ファイル(数GB以上)の書き込みが500エラーで失敗します。
原因
「HTTP PUT」または「HTTPS PUT」を使用して、ECSにファイルを書き込みます。S3 PUTコマンドはオブジェクトを部分的に追加しません。リクエストは書き込みの成功または失敗(すべてまたはゼロ)のいずれかです
「オール・オア・ナッシング」操作であるため、大容量ファイルのデータ転送中に中断が発生すると、その書き込みは完全に失敗します。この失敗に対する唯一の手段は、書き込み処理全体を再試行し、次回の試行で成功することを祈ることです。
「オール・オア・ナッシング」操作であるため、大容量ファイルのデータ転送中に中断が発生すると、その書き込みは完全に失敗します。この失敗に対する唯一の手段は、書き込み処理全体を再試行し、次回の試行で成功することを祈ることです。
解決方法
大容量ファイル(GB以上)の場合は、PUT操作の代わりにマルチパート アップロード(MPU)を使用することをお勧めします。この推奨事項は、長い書き込み完了時間(AWSのベスト プラクティスに従って100MB以上)を回避するために行われます
例:
80GBのファイルがチャンク化され、各チャンクがECSに送信されます。いずれかのパーツのアップロードが失敗した場合は、オブジェクト全体ではなく、単一のパーツのアップロードのみが再試行されます。
MPUの動作はマルチスレッド化できるため、MPUのパフォーマンスは単一の大規模なPUTよりも優れていると予想されます。その結果、MPUを使用すると、複数の接続と帯域幅をより有効に活用できます。つまり、複数のパーツを同時に送信できるため、大容量ファイルの書き込み時の全体的なパフォーマンスが向上します。
例:
80GBのファイルがチャンク化され、各チャンクがECSに送信されます。いずれかのパーツのアップロードが失敗した場合は、オブジェクト全体ではなく、単一のパーツのアップロードのみが再試行されます。
MPUの動作はマルチスレッド化できるため、MPUのパフォーマンスは単一の大規模なPUTよりも優れていると予想されます。その結果、MPUを使用すると、複数の接続と帯域幅をより有効に活用できます。つまり、複数のパーツを同時に送信できるため、大容量ファイルの書き込み時の全体的なパフォーマンスが向上します。
その他の情報
PUT から MPU に切り替えるアプリケーション開発者向けのリソース:
TransferManager (AWS SDK for Java - 1.12.588) (amazon.com)
AWS MPUの概要: (MPUのベスト プラクティスを含む)
マルチパートアップロードを使用したオブジェクトのアップロードとコピー - Amazon Simple Storage Service
対象製品
ECS Appliance製品
ECS Appliance文書のプロパティ
文書番号: 000048288
文書の種類: Solution
最終更新: 08 9月 2025
バージョン: 5
質問に対する他のDellユーザーからの回答を見つける
サポート サービス
お使いのデバイスがサポート サービスの対象かどうかを確認してください。