WeTransfer が Transloadit の Smart CDN でファイルプレビューを改善した方法
WeTransfer はファイル共有分野の大手で、大容量ファイルを手軽に転送できるサービスとして広く知られています。毎月 2 ペタバイト(PB)ものファイルプレビューを生成・配信する WeTransfer は、既存のインフラや開発チームに過大な負荷をかけず、シームレスなリアルタイムプレビューを提供するソリューションを必要としていました。同時に、技術革新によるカーボンフットプリントの削減も目指していました。WeTransfer チームが見いだした解決策は、Transloadit の Smart CDN でした。このサービスは目の前の課題を解決しただけでなく、効率性と予想を超える柔軟性ももたらしました。

主な成果
- 2 PB/月 生成・配信したメディアプレビューの量。WeTransfer が 2024年5月に報告
- 60 ms 最適化後の平均エンコード時間。2024年5月の導入事例で報告
- 約10分の1
同じ結果を得るために使用した計算資源。従来のパイプラインとの比較で、2024年5月に報告
データに関する注記:月間処理量は、WeTransfer の Engineering Manager である Martijn Vermaat が報告した本番環境の数値です。エンコード時間と計算資源の使用量は、Transloadit チームが六つの画像リサイズツールのベンチマークと重複処理の削除を行った後、WeTransfer のプレビュー処理について報告したものです。これらは特定のワークロードにおける数値であり、サービス全体に対する保証ではありません。
課題:膨大なプレビューデータの管理
あらゆる種類のメディアに対して即座に信頼性の高いファイルプレビューを提供することは、ファイル共有プラットフォームのユーザー体験を向上させます。WeTransfer の Engineering Manager、Martijn Vermaat は、その課題を次のように説明します。
「毎月 2 PB のメディアプレビューを配信するのは、大きな仕事です。扱うメディアの種類が多様なため、さらに複雑になっていました。オンデマンドで、高性能(リアルタイムでレイテンシーが <600 ms)、堅牢かつ柔軟なソリューションが必要でした。」
Martijn Vermaat
これほどの量のデータを扱うには、気候への影響も考慮する必要があります。ファイル単位の小さな非効率も、積み重なるとカーボンフットプリントの大幅な増加につながります。WeTransfer チームはこの点を強く認識し、対処したいと考えていました。
こうした背景から、WeTransfer は自社サービスで発生するファイル処理の需要に対応できる、適切なソリューションを探し始めました。
解決策:Transloadit の Smart CDN と比類のないサポート
WeTransfer チームが見つけた解決策は、Transloadit の Smart CDN でした。シンプルな URL リクエストだけで、幅広い種類のメディアのファイルプレビューをその場で生成できることが、すぐに評価されました。しかし、それだけではありません。Martijn は、Transloadit を真に際立たせているものについて、こう振り返ります。
「Smart CDN の機能は私たちのニーズにかなり合っていましたが、最も驚いたのは、Transloadit の粘り強いサポートと機能リクエストを実装しようとする姿勢、そして変化し続ける目標に対応する力でした。チームの迅速な対応と柔軟に適応する姿勢は、私たちの継続的な成功に欠かせない役割を果たしています。これほど長く事業を続けながら、今なおこれほど機敏で顧客を重視する会社には、なかなか出会えません。」
導入は始まりにすぎませんでした。WeTransfer チームは私たちと緊密に連携し、自社サービスに合わせて当社のエンコードプラットフォームを最適化しました。送られてくる膨大なデータを、最小限の処理(および気候への影響)で扱えるようにするためです。共同創業者の Tim が検討した内容には、次のようなものがありました。
- この用途ではデフォルトでメタデータを抽出しないようにするなど、不要な処理の削減
- 中間処理として S3 に保存する代わりに、結果をクライアントへ直接ストリーミング
- 6 種類の画像リサイズツールを負荷環境でベンチマークし、CPU ティックあたりのスループットが最も高いものを特定
- マシンの役割ごとに責務を明確に分離する一方、ネットワークの追加の往復やキャッシュミスが生じる既存のクラスターではなく、単一マシンでフロー全体を処理
- フレームグラフを確認し、重複した計算を避けるためのキャッシュを追加
これらの最適化により、同じ最終結果をユーザーに届けるための計算資源の消費は 10分の1となり、ハードウェアとエネルギーを大幅に節約できました。さらに、この削減によって WeTransfer のファイルプレビューのエンコード時間は、数秒から平均 60 ms に短縮され、ユーザー体験も大きく向上しました。
成果:効率性の向上と未来に向けたパートナーシップ
ささやかな協力から始まった関係は、2021年から続く実りあるパートナーシップとなりました。WeTransfer チームは並外れた課題に直面していましたが、Transloadit の Smart CDN の貢献もあり、本業に集中しながらその課題を解決できました。Transloadit の Smart CDN の導入により、WeTransfer のファイルプレビュー生成は、エネルギー効率、ユーザー体験、信頼性の面で大きく改善しました。
カーボンフットプリントを共同でさらに削減する計画も進んでいます。両社の中核を担うエンジニアは、100% 再生可能エネルギーで稼働する新しいデータセンターの開設を検討しています。
良好なパートナーシップに共通するように、双方に大きなメリットがあります。Transloadit の共同創業者 Kevin van Zonneveld は、この協力が両社にどのような利点をもたらしたかを説明します。
「WeTransfer との協力は、互いにメリットのあるパートナーシップの好例です。WeTransfer の非常に優秀なチームメンバーとやり取りするのは、いつも楽しいことです。彼らのフィードバックと私たちの専門知識によって、Transloadit の Smart CDN はクラス最高水準へと進化しました。これはすべてのお客様に直接利益をもたらし、ひいては Transloadit にも利益をもたらします。同時に、WeTransfer のインフラとチームに余力が生まれ、その中核的な使命に最も重要な領域へ集中できるようになりました。」
今後の展望
Transloadit の Smart CDN と卓越したサポートという強固な基盤の上に築かれた、WeTransfer と Transloadit の協力関係は、テクノロジー分野のパートナーシップに新たな基準を示しています。Martijn は次のように締めくくります。
「Transloadit と歩んできた道のりは、素晴らしいものでした。そのサポートと柔軟性は、私たちのサービス向上に極めて重要な役割を果たしてきました。私たちの Slack に参加してくれていると、自社のエンジニアリング部門の一員のように感じることもありました。Transloadit は継続的な技術革新、AI 分野への展開、炭素排出量の削減に力を注いでいます。これから何が実現するのか、そしてパートナーシップがどう進化し続けるのか、楽しみにしています。」
当社の Smart CDN に関するご質問や、Transloadit を導入してコスト、炭素排出量、市場投入までの時間、レイテンシーを大幅に削減する方法については、お問い合わせから担当者に直接ご相談ください。
