Los secretos del éxito de la migración de Spark a Snowflake: historias de clientes y resultados

El panorama empresarial actual es cada vez más competitivo, y la plataforma de datos adecuada puede marcar la diferencia entre los equipos que se sienten capacitados y los que no. Me encanta hablar con líderes de todos los sectores y organizaciones para saber qué tienen en mente cuando evalúan diferentes plataformas de datos. 

En estas conversaciones, hay una serie de preguntas que escucho una y otra vez: ¿Será mi plataforma de datos lo suficientemente escalable y fiable? ¿Será fácil de usar para todo mi equipo? ¿Cómo serán los costes? ¿Cómo se mantendrán seguros y gobernados mis datos? 

Una parte fundamental de esta decisión es determinar sobre qué tecnología fundamental construir la infraestructura. Los entornos gestionados de Apache Spark —como Databricks, Amazon EMR y ciertas implementaciones de Cloudera— pueden plantear una gran cantidad de problemas a los equipos: complejidad, costes impredecibles, problemas de seguridad o problemas de rendimiento. 

Para mí, estos factores son los principales motivos por los que organizaciones de todos los tamaños y sectores se pasan a Snowflake. Ayudar a las organizaciones a través de una migración y ver los enormes resultados que logran como resultado son algunas de las partes más gratificantes de mi trabajo. En el nuevo ebook Secretos de Apache Spark para el éxito de la migración a Snowflake, destacamos algunas de estas interesantes historias de clientes tan variados como AMN Healthcare, IGS Energy, Intercontinental Exchange y la Bolsa de Nueva York. 

Estos son solo algunos ejemplos de organizaciones líderes que están migrando de entornos gestionados de Spark a Snowflake para ahorrar millones de dólares, mejorar el rendimiento y comercializar productos más rápido para satisfacer las necesidades de sus clientes antes. 

Travelpass ofrece experiencias de viajero más curadas y ahorra un 65 % en costes

Inspirándose en la idea de descubrir puntos en común a través de la exploración, Travelpass conecta a los viajeros con los mejores hoteles y experiencias de viaje para satisfacer sus necesidades. Los datos son el alma del negocio de Travelpass; sin embargo, los equipos de datos de Travelpass dedicaban mucho tiempo a centrarse en cómo crear, en lugar de en qué.

Al pasar de Databricks a Snowflake, ahora Travelpass capacita a más personas trabajar con datos para ofrecer una mayor eficiencia, una toma de decisiones más fundamentada y una experiencia más personalizada para los viajeros de todo el mundo. Gracias a la facilidad de uso y la accesibilidad de Snowflake, incluso los ingenieros que no son de datos de Travelpass ahora contribuyen a los datos de Snowflake de una manera significativa y rápida.

Entre sus ventajas se incluyen: 

• Ahorro de costes del 65 % al cambiar de su plataforma anterior, Databricks, a Snowflake

• Mejora de la eficiencia de la entrega de datos a las unidades de negocio en un 350 % gracias a Snowflake Dynamic Tables

• Mayor fiabilidad y estabilidad del ecosistema al eliminar la depuración del sistema anterior, que requiere una gran mano de obra

Chicago Trading Company logra un ahorro de costos del 54 % y cumple con su contrato de nivel de servicio (service-level agreement, SLA) diario por primera vez

Reconocida como una empresa líder en el comercio de derivados, Chicago Trading Company (CTC) proporciona liquidez a mercados de todo el mundo, lo que ayuda a impulsar mercados eficientes, estables y saludables mediante la participación tanto en compras como en ventas. La plataforma de investigación de CTC recopila información de miles de fuentes, incluidas fuentes de cada bolsa en la que opera, precios bursátiles históricos y datos de terceros. Sin embargo, CTC pagaba 800 000 USD al año solo para mover los datos de Snowflake a la solución gestionada de Spark y volver a procesarlos. 

Para superar estos obstáculos, CTC trasladó su procesamiento de la solución gestionada de Spark a Snowflake, donde ya había creado su base para los datos. Con Snowflake y Snowpark, CTC ha obtenido una mayor visibilidad y control sobre sus costes y ha reducido drásticamente los fallos en los trabajos de procesamiento de datos. Una mejora inestimable, dado que los trabajos siempre se ejecutan contrarreloj. Gracias a la reducción de costes, ahora CTC maximiza los datos para seguir innovando y aumentar sus capacidades de creación de mercado.

Entre sus ventajas se incluyen: 

• Un 54 % de ahorro en costes —que asciende a millones de dólares anuales— al pasar de la solución gestionada de Spark a Snowflake

• 800 000 USD ahorrados al año al eliminar el movimiento de datos de Snowflake y viceversa

• La primera vez que cumplió el SLA diario de tener los datos disponibles al menos una hora antes de la apertura del mercado fue un hito que no había podido rastrear antes de Snowflake 

Swire ahorra millones en costes y acelera la implementación de modelos en semanas 

Swire Coca-Cola, EE. UU., es el embotellador local de Coca-Cola y otras marcas de bebidas en 13 estados de todo el oeste estadounidense, y ofrece refrescos a 31 millones de consumidores cada día. Swire tenía Snowflake como única fuente de verdad y una plataforma de Spark gestionada de forma independiente para sus necesidades de inteligencia artificial (IA) y aprendizaje automático (machine learning, ML). Sin embargo, la gestión de infraestructuras complejas desvió a los equipos de datos de la creación de modelos, lo que provocó retrasos. Los clústeres de Spark necesitaban mantenimiento manual para evitar desperdicios y tardaban entre 10 y 15 minutos en ponerse en marcha. Por su parte, la plataforma gestionada de Spark fuera de Snowflake planteaba problemas de gobernanza de datos, lo que afectaba a la integridad y la seguridad de los datos.

Snowflake se perfiló como la solución única ideal para las necesidades de IA y ML de Swire. Ofrecía una plataforma singular que reducía significativamente la complejidad, mejoraba la facilidad de uso y proporcionaba un marco sólido para mejorar la gobernanza de datos. Con estas mejoras, Swire ha optimizado las rutas logísticas planificadas para reducir significativamente los costes relacionados con el combustible, los gastos del conductor y el coste general del servicio. El impacto en el tiempo de comercialización fue igualmente notable, ya que Swire pudo desarrollar modelos en Snowflake bastante más rápido.

Entre sus ventajas se incluyen: 

• Millones de dólares en ahorro de costes al optimizar las rutas logísticas planificadas.

• Aceleración del tiempo de comercialización, lo que se traduce en semanas de ahorro de tiempo al implementar modelos críticos de IA y ML más rápido. 

• Reduce el coste total de la propiedad gracias a una gestión de datos optimizada y automatizada.

Más éxitos de migración 

Estas historias son solo el principio de cómo las organizaciones se están trasladando a Snowflake para impulsar la ventaja competitiva. 

Descarga el ebook Secretos de Apache Spark para el éxito de la migración a Snowflake y descubre las cinco razones clave por las que las empresas se están trasladando a Snowflake y cómo estas migraciones están ayudando a las empresas a reducir los costes y la complejidad, y mejorar la fiabilidad de sus operaciones diarias.