JPEG XS とは?
JPEG XS は、ISO/IEC 21122 として標準化された、低複雑度・低遅延の画像・動画コーデックです。適度な圧縮率で、視覚的可逆圧縮と数学的可逆圧縮に対応します。
JPEG XS の仕組み
JPEG XS は、従来は非圧縮動画を伝送していた回線向けに設計されています。こうした回線では、ごく少量のバッファリングと単純なハードウェアで画像を圧縮・復元する必要があります。ウェーブレット変換で各成分を帯域に分割し、係数を画像の各領域に対応するプリシンクトにまとめ、さらにプリシンクトを画像の全幅にわたるスライスにまとめます。この構造により、エンコードとデコードで加わる遅延を、通常は数ライン分というフレームの一部に抑えられます。また、精密なレート制御により、固定容量の回線にストリームを収められます。その代わり、圧縮率は控えめです。視覚的可逆圧縮の一般的な圧縮率は、RFC 9134 では 2:1 から 10:1、2024 年発行の規格第3版では 2:1 から 18:1 です。そのため、ストリームには通常、非圧縮時の約十八分の一から二分の一のビットレートがなお必要です。第2版まではすべてのピクチャーを個別に符号化していましたが、第3版では、直前のピクチャーに依存できる時間差分符号化モードがオプションとして追加されています。
要点
- すべてのピクチャーを単独でデコードできるかどうかは、プロファイルによって異なります。時間差分符号化(TDC)を使用しないコードストリームは、独立したピクチャーです。第1版と第2版で認められていたのは、この形式のみです。第3版では、直前のコードストリームが残したフレームバッファーにデコードが依存し得る TDC プロファイルが追加されています。そのため、フレーム単位で正確に切り替えや編集、パケット損失後の復旧ができると考える前に、プロファイルを確認してください。
- JPEG XS は、圧縮率を抑えることで遅延を低減します。エンコードとデコードで加わる遅延は、通常は数ライン分というフレームの一部に抑えられますが、視覚的可逆圧縮の一般的な圧縮率は控えめです。RFC 9134 では 2:1 から 10:1、2024 年の第3版では 2:1 から 18:1 で、画像によってはそれ以上になります。この遅延はコーデックのみを対象としています。ST 2110-22 システム向けの VSF TR-08 勧告は、エンドツーエンドの伝送遅延の目標を約十分の一フレームとしていますが、これにもネットワーク伝送と経路差を補うバッファリングは含まれません。そのため、機器間の遅延はベンダーに確認してください。圧縮率は限界値ではなく一般的な値として扱い、使用する形式とコンテンツで各機器が実現するビットレートと画質を確認してください。このコーデックは、従来は非圧縮動画を伝送していた経路向けに設計されています。
- JPEG XS をデコードできるだけでは、二台の機器が IP 経由で相互運用できるとは限りません。RFC 9134 は、コードストリームとスライスという二つの RTP パケット化モードを定義しており、送信側は必須の
packetmodeパラメーターでいずれかを宣言します。SDP のオファー/アンサーネゴシエーションでは、提示されたパラメーターに対応していない受信側は、セッションを拒否する必要があります。相互運用性の勧告では、選択肢がさらに絞られます。SMPTE ST 2110-22 向けの VSF TR-08 は、コードストリームモードを必須とし、機器が対応を表明する構成ごとに、処理すべきプロファイル、レベル、サブレベル、形式を列挙しています。そのため、両方の機器が共通の構成への対応を表明していることを確認してください。 - JPEG XS のコードストリームは、色の解釈を含まないサンプル値を保持します。原色、伝達特性、フレームレート、インターレースモードは、別個の映像サポートボックスと色仕様ボックス、またはトランスポートのシグナリングで伝送されます。そのため、パイプラインではコードストリームとともにこれらの情報を伝送する必要があります。
JPEG XS が役立つ場面
プロ向けの映像制作や IP 映像伝送回線では、最大限の圧縮よりも予測可能な遅延が重要な場合に JPEG XS を利用できます。両端の機器が規格に対応し、比較的高いビットレートを維持できる必要があります。