Snowflake Ventures、Snowflakeのメディア業界向けAIデータクラウドに高度な動画理解をもたらすTwelve Labsに投資

急速に変化する、競争の激しいメディアおよび広告業界において、メディア企業、スポーツ組織、広告代理店などは、消費者体験を改善し、収益化を促進する方法を常に模索しています。これには、コンテンツ分析、動画およびクリエイティブ検索機能、コンテンツのパーソナライゼーション、クリエイティブのバージョン管理が含まれます。これらの機能はすべて、SnowflakeとTwelve Labsの動画埋め込みによって利用可能となった、連携AI機能を活用することで解放されます。これらの埋め込みは、機械学習アルゴリズムが複雑なデータやデータオブジェクト間のリンクを処理できるようにして、Twelve Labsが市場に投入している中核機能を有効にするためにも役立ちます。

Twelve Labsが最先端のマルチモーダル埋め込みテクノロジーを提供

Twelve Labsの動画理解プラットフォームは、AIを使用して動画から視覚データ、音声データ、テキストデータ、コンテキストデータを抽出し、大規模なセマンティック検索、アナリティクス、インサイトを可能にします。その基本モデルは、動画の説明作成、シーン検出、論理的なブレークポイント指定における業界のリーダーであり、動画品質を維持しながら、さまざまなデバイスの画面サイズに動画を適応させることができます。従来のアプローチでは、フレームごとの分析や、モダリティごとに異なるモデルに依存していました。Twelve LabsのAPIは、視覚キュー、ボディランゲージ、音声、動画全体のコンテキスト間の複雑なインタラクションを、コンテキストベクトル表現を生成することでキャプチャします。この包括的なアプローチにより、メディア組織のデータチームは、動画コンテンツをより繊細に理解しながら作業することができます。

今年の初め、SnowflakeとTwelve Labsは提携し、Twelve Labs Video Understanding APIをすべてのAIデータクラウドユーザーが利用できるようにしました。Twelve LabsとSnowflakeを利用することで、ユーザーはAIと動画の埋め込みワークフローをデータの場所で実行できるようになります。これにより、動画データと埋め込みに対する強力なプライバシーとガバナンスを維持しながら、高度な動画分析機能のメリットを享受できます。これらはすべて、安全な環境内で実行して、訪問者の行動と反応を分析できます。また、ユーザーは、巨大なコンテンツリポジトリから特定の映像を見つけ、そのデータを再利用して、Snowflakeのデータに基づいてコンシューマーをターゲティングできる新しいコンテンツを生成できます。

Twelve Labs APIは、テラバイトやペタバイト単位の動画であっても、あらゆるアプリケーションについて人間のような動画理解をもたらします。このリッチなマルチモーダルな動画埋め込みは、Snowflakeのベクトルデータ型サポートを使用してSnowflakeに保存できます。これにより、AIデータクラウド内で、より洗練された動画アナリティクスとAIドリブンな動画ベースの応用が可能になります。この統合では、生成AI機能のスイートを提供するSnowflakeのフルマネージドAIサービスであるSnowflake Cortex AIと、スケーラブルな処理のためのSnowparkコンテナサービスを活用します。開発者は、Twelve Labsの動画理解テクノロジーとSnowflakeのデータ管理機能を組み合わせたカスタムアプリケーションを作成することで、高度な動画アナリティクス、検索、コンテンツモデレーション、レコメンデーションシステムを実現できます。この強力な組み合わせにより、組織はSnowflakeの堅牢なデータプラットフォームの恩恵を受けながら、動画中心のアプリケーションのための洗練されたAIドリブン型ソリューションを構築できます。

この投資の後も、SnowflakeとTwelve Labsは、強力な動画AI機能を統合データプラットフォームにさらに簡単に導入できるようにする機会を特定するために協力して取り組んでいきます。