Capital One cuenta con Snowflake para la ciencia de datos

La misión de Capital One es cambiar la banca para siempre con nuestra visión de futuro para este sector. No empezamos haciendo lo que hacen otros bancos, sino que nos fijamos en cómo la tecnología está cambiando las vidas de las personas. 

Soy Salim Syed, Engineering Lead. 

Me llamo Nagender-Gurram y soy director de data engineering. Llevo 16 años en Capital One y he visto muchos cambios. El mayor avance ha sido la transición a la nube. 

Las cosas estaban cambiando muy rápido y necesitábamos adaptarnos. Teníamos que ser ágiles. Pasarnos a la nube fue el primer paso. Otras empresas financieras también lo están haciendo, pero de puntillas. Somos el primer banco en trasladarnos por completo a la nube pública. Tuvimos que determinar cuáles eran las prácticas recomendadas con un cómputo y un almacenamiento ilimitados. o cómo gestionamos la gobernanza en esta nueva era. 

Nos pareció que Snowflake era concepto revolucionario.

Snowflake nos permitió separar el cómputo del almacenamiento, lo que ayudó a los equipos de ingeniería de datos a centrarse más en innovar y no en gestionar o aprovisionar infraestructuras. 

La cantidad de datos que recibimos actualmente llega a gran velocidad y debemos tener la infraestructura para extraer la información y ponerla al servicio de los clientes. Si hay un problema en un clúster, Snowflake se reinicia y reanuda el trabajo desde el mismo punto automáticamente, lo que supone una gran ventaja para la continuidad empresarial. 

Con Snowflake, nuestra comunidad de científicos de datos puede crear algoritmos de ML y entrenar modelos para que podamos vender una gran cantidad de productos digitales, como Eno, que es el asistente inteligente de Capital One. En cuanto nos decidimos por Snowflake, nos dimos cuenta de que teníamos que empezar a desarrollar herramientas de autoservicio para nuestras líneas de negocio a fin de que pudiesen gestionar su incorporación de recursos de Snowflake. 

El objetivo era lograr un sistema sencillo y transparente, y ocultar la complejidad de la gobernanza, lo que nos permitió ir mucho más rápido.

Utilizamos Amazon Web Service como principal proveedor de nube y Snowflake se integra muy bien con se servicio. El movimiento de datos ha sido increíblemente rápido debido a las integraciones que ya habían hecho. Miles de nuestros analistas ejecutan millones de consultas al día y, a veces, tenemos algunas consultas simultáneas. Pero el rendimiento es predecible. Las consultas se ejecutan a la misma velocidad, independientemente de quién más esté utilizando la plataforma. 

Estamos entusiasmados con muchas de las nuevas funciones de Snowflake, como Snowpark, donde podemos implementar mejor nuestros modelos de ML. También estamos explorando marketplaces de datos. Estamos llevando a cabo varias pruebas de concepto (proof of concept, POC) y usando datos de la COVID-19, lo que nos está ayudando a tomar mejores decisiones financieras relacionadas con la localización de puntos conflictivos y con cómo reaccionar con rapidez.

Supone toda una revolución para el sector de los datos. Mantenemos una buena colaboración y Snowflake siempre agradece nuestros comentarios. Creo que Snowflake es muy potente. Ahorra mucho tiempo y dinero, acelera el tiempo de comercialización y puede escalarse según sea necesario. 

En resumen, Snowflake se ha adaptado a nuestro caso de uso mejor que el resto de tecnologías del mercado.