CDN キャッシュとは
CDN キャッシュは、地理的に分散したエッジ拠点にコンテンツのコピーを保存する仕組みです。オリジンから同じ表現を繰り返し取得せずに、受信者の近くでリクエストに応答できます。
CDN キャッシュの仕組み
CDN はリクエストをエッジ拠点に割り当て、そこや中間のシールドに保存されたオブジェクトの再利用を試みます。キャッシュミス時には、上流のキャッシュまたはオリジンから表現を取得し、鮮度とキャッシュ対象の判定規則に従って保存します。各拠点は独自にキャッシュを蓄積するため、ある地域でキャッシュ済みのオブジェクトでも、別の地域ではミスになる場合があります。また、利用頻度の低いオブジェクトは、有効期限前にキャッシュから削除される場合があります。メディアでは、不変のセグメントや派生成果物には長い有効期間を設定できます。一方、マニフェストや認可に依存する応答には通常、より短い有効期間や、より選択的な扱いが必要です。
要点
- ストリームのマニフェストとメディアセグメントには、それぞれ異なる有効期間が必要です。HLS では、ライブメディアプレイリストは、ターゲット期間ごとにほぼ一度、少なくとも一つの新しいセグメントを含む新しい版に置き換わります。RFC 8216 では、その更新間隔をターゲット期間の半分以上、一倍半以下とするよう定めています。そのため、エッジがプレイリストをそれより長く保持すると、プレイヤーから新しいセグメントが見えなくなります。
VODが付いたプレイリストは変更してはならず、静的ファイルと同様にキャッシュできます。セグメントはプレイリストとは別に、それぞれの URL、または大きなファイルのバイト範囲として取得されます。パッケージャーが公開済み URL の参照先のバイト列を一切変更しなければ、長い有効期間を設定できますが、仕様自体がその不変性を保証するわけではありません。Apple の HLS 第二版ドラフトは、低遅延サーバープロファイルにおいて、通常のプレイリスト応答をターゲット期間の半分の間キャッシュし、Cache-Controlで有効期間を伝えることを推奨しています。 - キャッシュキーは、どのリクエストが同じエントリを共有するかを決めます。デフォルトの構成は CDN ごとに異なります。Amazon CloudFront のデフォルトのキーはディストリビューションのドメイン名と URL パスで、クエリ文字列、ヘッダー、Cookie は含みません。Cloudflare のデフォルトには、スキーム、ホスト、クエリ文字列を含むパスに加え、リクエストの
Originヘッダーが含まれます。そのため、同じ URL でもOriginの有無によって別々に保存されます。Google Cloud CDN は、バックエンドサービスに対してリクエスト URI 全体を使用します。キーが同一なら、リクエストは同じエントリを共有します。デフォルト設定でも、この共有は起こります。CloudFront のデフォルトでは、クエリ文字列だけが異なる URL に同じキャッシュ済み応答が返されます。応答を変えるリクエスト値はすべてキーに含め、それ以外は除外してください。応答が変わらないのにリクエスト間で異なる要素を含めると、キャッシュが分散し、ヒット率が下がるためです。 - 大きなファイルでは、CDN が
Rangeリクエストをどう扱うか確認してください。オリジンの負荷やシーク動作に影響するためです。CloudFront は、保持していない範囲のリクエストをオリジンに転送し、返された部分をキャッシュします。その際、より広い範囲を要求することもあります。オリジンが範囲リクエストに対応していない場合、CloudFront はオブジェクト全体を受信してキャッシュします。Google Cloud CDN は、オリジンがバイト範囲リクエストに対応していると記録した後、独自のバイト範囲リクエストでキャッシュを埋めます。そのためには、Accept-Ranges: bytes、既知の全長、さらにLast-Modifiedと強いETagの両方が必要です。オリジンが対応していない場合、キャッシュ可能な最大サイズは大幅に小さくなります。Fastly が大きなオブジェクトを部分ごとにキャッシュするのは、Segmented Caching が有効な場合だけです。したがって、大きなメディアを部分ごとにキャッシュするには、オリジンが範囲リクエストに正しく応答することが前提です。 - 応答がキャッシュ対象になるかどうかと、どれだけの期間新鮮とみなされるかは別々に決まり、そのルールはプロバイダーごとに異なります。Cloudflare はデフォルトではファイル拡張子に基づいてキャッシュし、ルールがなければ HTML や JSON をキャッシュしません。Google Cloud CDN のデフォルトモードは、
Content-Typeに基づいて静的コンテンツタイプをキャッシュし、HTML と JSON には明示的なディレクティブを必要とします。Google Cloud CDN は Cookie を設定する応答をキャッシュしません。Cloudflare は設定に応じて、その応答をキャッシュしないか、Cookie を削除してキャッシュします。期待したキャッシュヒットが発生しない場合は、CDN が報告するキャッシュステータスを確認してください。Cloudflare のCF-Cache-Status応答ヘッダーは、応答がキャッシュ対象でもそのキャッシュ内になかった場合にMISS、オリジン応答がキャッシュ不可だった場合にBYPASS、リクエストがそもそもキャッシュ対象でなかった場合にDYNAMICを示します。
CDN キャッシュが重要になる場面
CDN キャッシュを設定して、メディアの遅延とオリジンの負荷を減らし、トラフィックの急増を吸収します。キャッシュキーや鮮度のルールが不適切だと、誤ったバリアントを配信したり、古いコンテンツをユーザーに表示し続けたりする可能性があります。
Transloadit による CDN キャッシュの支援
Transloadit の Smart CDN は、オンデマンド処理の前段に CDN キャッシュを配置します。tlcdn.com URL へのリクエストには、Robot の /tlcdn/deliver が応答し、結果をキャッシュしてエッジロケーションから配信します。キャッシュミス時には Template の Assembly が実行され、ヒット時には何も実行せずにエッジが応答します。Robot の /file/serve が送信する Cache-Control の値によって、キャッシュされた結果が新鮮とみなされる期間が決まります。
URL に対する最初の未キャッシュリクエストには、ソースの取得時間と処理時間が含まれます。現在のデフォルトの有効期間は /file/serve のページに記載しています。変更される可能性があるため、ここでは再掲しません。
出典
- RFC 9111:HTTP キャッシュ(キャッシュキー、部分応答の保存、鮮度)
- RFC 8216:HTTP Live Streaming、セクション 6.2(サーバーによるプレイリストの更新方法)
- HTTP Live Streaming 第 2 版(Internet-Draft 22)、付録 B.1:推奨キャッシュ有効期間
- Amazon CloudFront:キャッシュキーの理解
- Amazon CloudFront:オブジェクトの部分リクエスト(範囲 GET)の処理方法
- Cloudflare:キャッシュキー
- Cloudflare:デフォルトのキャッシュ動作(対象条件、デフォルトのファイル拡張子、リクエストの集約)
- Cloudflare:キャッシュ応答(CF-Cache-Status の値)
- Cloudflare:HEAD リクエストと Set-Cookie ヘッダー(Cookie を設定する応答がキャッシュされる条件)
- Google Cloud CDN:キャッシュの概要(キャッシュ可能なコンテンツ、キャッシュキー、バイト範囲リクエスト)
- Fastly: Segmented Caching