再開可能なアップロードとは
再開可能なアップロードは、受信済みの転送進捗を記録し、中断したクライアントが最後に確認されたオフセットから続行できる仕組みです。サーバーがすでに受信したファイル部分の再送信を避けられます。
再開可能なアップロードの仕組み
サーバーはアップロード識別子に紐づけて転送状態を保持し、クライアントは再開前に次のバイト位置を問い合わせるか、記憶しておきます。データは順序付きのチャンクで送信され、そのオフセットによって受信側は欠落、重複、古いクライアント状態を検出できます。これはマルチパートアップロードとは異なる概念です。マルチパートではファイルを分割できますが、セッションをまたぐ復旧の仕組みが必ずしも定義されているわけではありません。再開可能なアップロードは、検証、処理、メディアの永続ストレージへの保存より前の取り込み層に位置します。
要点
- オフセットベースのプロトコルでは、通常、サーバーが確認した位置をクライアントが正確に送信する必要があります。位置が一致しない場合は、そのままバイトを追加するのではなく、拒否するべきです。
- 再開によって確認済みデータの再送信を避けられますが、放置された未完了のアップロードがストレージを無期限に消費しないよう、有効期限とクリーンアップのポリシーは引き続き必要です。
- チェックサムではアップロードしたチャンク内の破損を検出できます。最後にファイル全体のサイズまたはダイジェストを検証することで、正しい順序のチャンクから意図したオブジェクトが生成されたかを確認します。
再開可能なアップロードが役立つ場面
大きなファイルや、モバイル接続など切断が起こりやすいネットワークでは、再開可能なアップロードを選びます。古い進捗データによって転送が破損したり最初からやり直しになったりする可能性があるため、クライアントとサーバーのオフセットを一致させる必要があります。