Snowflake Ventures invierte en Twelve Labs para llevar la comprensión avanzada de los vídeos al Snowflake AI Data Cloud para medios de comunicación

En un sector de la publicidad y los medios de comunicación competitivo y que cambia rápidamente, las empresas de medios de comunicación, las organizaciones deportivas y las agencias de publicidad, entre otras, buscan constantemente formas de mejorar la experiencia del consumidor e impulsar la monetización. Esto incluye análisis de contenido, funciones de búsqueda de vídeos y material creativo, personalización de contenido y versiones de anuncios. Todas estas capacidades se aprovechan gracias a las capacidades de inteligencia artificial (IA) conjunta ahora disponibles en las integraciones de vídeo de Snowflake y Twelve Labs. Estas integraciones también ayudan a los algoritmos de aprendizaje automático (machine learning, ML) a procesar datos complejos y los vínculos entre objetos de datos, lo que hace posibles las funciones principales que Twelve Labs está comercializando.

Twelve Labs proporciona tecnología de integración multimodal de última generación

La plataforma de comprensión de vídeos de Twelve Labs utiliza la IA para extraer datos visuales, de audio, de texto y contextuales de vídeos, lo que permite realizar búsquedas semánticas, elaborar analíticas y obtener información a escala. Sus modelos fundamentales son líderes en creación de descripciones de vídeo, detección de escenas y designación de puntos de corte lógicos, lo que permite que los vídeos se adapten a diferentes tamaños de pantalla mientras se mantiene la calidad del vídeo. Los enfoques tradicionales se basan en análisis fotograma a fotograma o en modelos independientes para diferentes modalidades. La API de Twelve Labs captura las interacciones complejas entre las indicaciones visuales, el lenguaje corporal, el discurso y el contexto de vídeo en general mediante la elaboración de representaciones vectoriales contextuales de estas interacciones. Este enfoque integral permite a los equipos de datos de las organizaciones de medios trabajar con una comprensión más precisa del contenido de vídeo.

A principios de este año, Snowflake y Twelve Labs se asociaron para poner la API Twelve Labs Video Understanding a disposición de todos los usuarios del AI Data Cloud. Con Twelve Labs y Snowflake, los clientes pueden llevar el flujo de trabajo de IA e integraciones de vídeo a sus datos. Esto les ayuda a mantener una sólida privacidad y gobernanza sobre sus datos de vídeo e integraciones, al tiempo que se benefician de capacidades avanzadas de análisis de vídeo, todo ello en un entorno seguro para analizar el comportamiento y las reacciones de los visitantes. Los usuarios también pueden encontrar secuencias específicas de repositorios de contenido enormes y reutilizar esos datos para generar contenido nuevo que pueda dirigirse a los consumidores a partir de los datos de Snowflake.

La API de Twelve Labs aporta comprensión de vídeo humana a cualquier aplicación, incluso con terabytes o petabytes de vídeo. Estas integraciones de vídeo multimodales enriquecidas se pueden almacenar en Snowflake gracias a su compatibilidad con tipos de datos vectoriales. Esto permite realizar analíticas de vídeo más sofisticadas y aplicaciones basadas en IA en el AI Data Cloud. Esta integración aprovecha Snowflake Cortex AI, el servicio de IA totalmente gestionado de Snowflake que proporciona un conjunto de funciones de IA generativa, y Snowpark Container Services para el procesamiento escalable. Los desarrolladores pueden crear aplicaciones personalizadas combinando la tecnología de comprensión de vídeo de Twelve Labs con las capacidades de gestión de datos de Snowflake, lo que permite disponer de sistemas avanzados de análisis de vídeo, búsqueda, moderación de contenido y recomendaciones. Esta potente combinación permite a las organizaciones crear soluciones sofisticadas y basadas en IA para aplicaciones centradas en vídeos mientras se benefician de la sólida plataforma de datos de Snowflake.

Tras nuestra inversión, Snowflake y Twelve Labs colaborarán para identificar oportunidades que faciliten aún más la incorporación de potentes funciones de IA de vídeo a una plataforma de datos unificada.