Siemens construye una plataforma de data mesh en toda la empresa para acelerar la innovación

Siemens es una empresa tecnológica global que combina el mundo digital con el mundo físico para beneficio de sus clientes y de la sociedad en general. Se centra en infraestructuras inteligentes para edificios, sistemas y procesos energéticos descentralizados, y la automatización y digitalización de su fabricación. Además, ofrece soluciones inteligentes para el transporte ferroviario y por carretera.

Siemens cree que los datos son uno de sus activos más importantes; por ello, se ha propuesto crear una cultura de datos respaldada por una mayor transparencia y por conexiones transversales; en definitiva, crear un ecosistema donde los datos respalden y conecten todo y a todo el mundo.

Para Siemens, pasar a ser una empresa basada en datos no es tanto una transformación digital, sino más bien una filosofía global. Durante varios años, la empresa se ha estado replanteado cómo utiliza los datos, tratando de obtener información clave sobre operaciones que favorezca la toma de decisiones y la automatización de procesos para aprovechar la innovación.

Como explica Christian Meyer, Head of Cloud Operations y Chief Technology Architect en Siemens AG, la escala de sus ambiciones en cuanto a datos ha revelado desafíos considerables en su infraestructura existente: “Por aquel entonces, teníamos uno de los data lakes de SAP HANA on-premise más grandes del mundo. Aunque sí satisfacía nuestras necesidades, era difícil de escalar y presentaba problemas para admitir una combinación de datos estructurados y no estructurados. Extraer datos de la nube e integrar soluciones de IA a escala suponía todo un desafío. Además, la falta de separación entre almacenamiento y cómputo aceleraba los costes”. 

Para llevar a cabo su estrategia basada en datos, adoptar y desarrollar plataformas de software como servicio y superar sus retos técnicos, Siemens decidió modernizar su enfoque respecto a los datos. La empresa actualizó su plataforma de datos para ofrecer funciones de linaje de datos, procesar cualquier tipo y cantidad de datos y proporcionar capacidades avanzadas de data sharing para que más usuarios empresariales pudieran sacar partido a sus datos. 

“Aprovechamos esta oportunidad para replantearnos cómo hemos estado gestionando nuestros datos”, explica Meyer. “Decidimos pasar de una infraestructura on-premise a la nube para sacar partido de las ventajas adicionales que supone este cambio y, así, poder prestar servicio a nuestros partners con mayor eficacia. Snowflake ha sido capaz de cumplir con nuestros exigentes requisitos de ciberseguridad y de optimizar los costes operativos”. 

El esfuerzo de la migración planteó a Siemens algunos retos. El primero fue que tuvo que replicar todos los datos de sus sistemas de origen casi en tiempo real. Por otro lado, también tuvo que analizar todas las dependencias entre productos de datos.

“Al utilizar SNP Glue para replicar más de 50 sistemas de planificación de recursos empresariales (enterprise resource planning, ERP), realizar más de 1500 millones de cambios al día en Snowflake y desarrollar un flujo de datos en dbt y en la plataforma code.siemens.com, basada en InnerSource Gitlab, conseguimos gestionar la complejidad y migrar con éxito a Snowflake. Desde entonces, hemos estado cosechando los frutos”, afirma Meyer.

Tras una evaluación exhaustiva de los diferentes almacenes de datos, Siemens eligió Snowflake como su solución global para innovación basada en datos. “Tuvimos en consideración a todos los grandes proveedores de este servicio, pero la oferta única del Data Cloud de Snowflake, su posicionamiento en el mercado y su trayectoria fueron decisivos”, asegura Meyer. “En particular, nos atrajeron sus numerosísimas capacidades de data sharing, su idea de separar el cómputo y el almacenamiento para reducir costes, su completa integración con nuestros partners de nube estratégicos ya existentes, como AWS, además de sus sólidas funciones de gobernanza y seguridad”. 

Con la implementación de Snowflake, Siemens ha sido capaz de construir el Siemens Data Cloud: un ecosistema abierto de la plataforma de data mesh que habilita la curación de productos de datos, aplicaciones downstream y el intercambio en un solo lugar gracias a la integración total de la pila de TI. 

Ahora, el Data Cloud de la empresa ya es el eje central de su estrategia de datos. Gracias a él, Siemens ha podido migrar varias aplicaciones de datos heredadas, incluidos sus datos de planificación de recursos empresariales (enterprise resource planning, ERP) esenciales, a la nube y replicar los datos de ERP de cerca de 50 sistemas en un único lugar y casi en tiempo real. 

En definitiva, la facilidad de uso de Snowflake, su compatibilidad con varios lenguajes y sus minuciosos controles de acceso han permitido a Siemens compartir datos exhaustivamente y acelerar la capacidad de su equipo para ejecutar proyectos de datos.

Para garantizar un data sharing fluido en toda su organización global con una única fuente de verdad, Siemens ha creado un marco de datos como servicio totalmente automatizado. La integración de la plataforma de desarrollo de aplicaciones con poco código de Mendix en Snowflake permite ofrecer funciones de arrastrar y soltar que los equipos internos pueden usar para crear e implementar productos de datos.  De esta forma, ahora una base de usuarios más amplia y menos centrada en TI puede acceder a los datos y sacarles partido en casos de uso específicos de fabricación y mejora de procesos. 

El data sharing también contribuye a garantizar que los compañeros que trabajen en diferentes entidades de Siemens puedan intercambiar datos relevantes y colaborar de forma rápida y eficaz. “Trabajar con Snowflake es una oportunidad fantástica para innovar”, cuenta Meyer. “Siempre nos centramos en la automatización integral que capacita a las personas para desarrollar nuevas ideas de manera independiente. El autoservicio es esencial: libera a la gente para que se pueda centrar en los datos”.

Utilizar el aprendizaje automático (machine learning, ML) y la IA para automatizar procesos, liberar recursos valiosos, descubrir nuevas fuentes de ingresos y aumentar el valor empresarial es esencial para hacer realidad las aspiraciones de Siemens basadas en datos. A tal fin, Siemens utiliza las integraciones profundas de servicios de Snowflake con otras plataformas de nube y proveedores de tecnología para garantizar que sus científicos de datos cuenten con las mejores herramientas y funciones posibles para mejorar el rendimiento y acelerar el tiempo de valorización. 

Otro aspecto importante de la integración de Siemens con Snowflake es su consolidada colaboración con AWS, que permite a Siemens utilizar las mejores herramientas en cada una de sus tareas. “Llevamos mucho tiempo colaborando con varios de los principales proveedores de nube, como AWS”, explica Meyer. “Las integraciones técnicas de Snowflake subrayan la importancia de estas colaboraciones, tanto en términos de tecnología como de nuestra visión conjunta, y nos ayudan a lograr la transformación a la nube. Utilizamos Snowflake como fuente de datos de Amazon SageMaker Data Wrangler sin necesidad de codificación. Snowflake es muy flexible y nos permite utilizar la mejor tecnología para cada caso de uso, un punto en el que siempre nos hemos centrado”. 

Gracias a Siemens Data Cloud, ahora los científicos de datos de la empresa tienen libertad para escalar su uso de IA, con la seguridad de poder experimentar con la tecnología y maximizar sus beneficios.

Un ejemplo de cómo Siemens utiliza Snowflake para automatizar procesos clave se encuentra en las cadenas de suministro de las fábricas, donde las interrupciones en la producción debido a la escasez de materias primas eran cada vez más habituales. Al utilizar procesos manuales que dependían de la experiencia humana y la intuición, la empresa se dio cuenta de que tenían una gran oportunidad para reducir su dependencia del conocimiento tribal y, en su lugar, servirse de la automatización basada en datos para identificar los riesgos y mejorar la disponibilidad de existencias.

“Es importante contar con una plataforma que conecte cada fuente de datos”, declara David Reindler, IT Teamlead Business Intelligence y Data Analytics en Siemens AG. “Snowflake nos proporciona escalabilidad y estabilidad; además, facilita la implementación de modelos y la solución de cuestiones empresariales. Nuestra potencia de cómputo también está aislada de otros casos de uso, por lo que nunca tenemos dificultades con el rendimiento”. 

De hecho, esta fue una de las primeras pruebas de concepto de Siemens con Snowflake en el ámbito logístico para conectar varias fuentes de datos, y se aplicó en tres centros de producción de automatización industrial en Alemania y China. El objetivo de la empresa era identificar materiales en riesgo de desabastecimiento gracias a algoritmos basados en datos. 

Al asignar puntuaciones de riesgo a cada material del proceso de la cadena de suministro y conectar todos sus sistemas y datos de varias fuentes en Snowflake, el Siemens Data Cloud puede identificar riesgos potenciales y poner en marcha acciones preventivas de forma autónoma. Es más, esta información se puede compartir fácilmente con los usuarios mediante Tableau, lo que proporciona información visual fácil de asimilar que mejora la toma de decisiones. 

“Nos hemos propuesto demostrar a la empresa las posibilidades que ofrece el Data Cloud”, afirma Rebecca Funk, IT Business Partner en Siemens AG. “El Siemens Data Cloud nos proporciona velocidad y flexibilidad para crear modelos de datos que añadan valor a los departamentos de nuestra empresa y ayuden a mejorar nuestros procesos empresariales. Me fascina la cantidad de proyectos que tenemos ahora mismo en Snowflake; ha crecido rapidísimo”.

Con una mayor flexibilidad y una plataforma independiente de la nube que admite la transmisión, innumerables integraciones, API, datos del Internet de las cosas (IdC), datos de fabricación y una sólida gobernanza de datos, Siemens ha dado acceso a sus empleados a un Data Cloud creado con la última tecnología, aumentando así la competitividad y agilidad de la empresa. 

Además, gracias a un motor de cómputo elástico y a una arquitectura multiclúster, la escala y la rentabilidad de la plataforma han fomentado un ahorro considerable de la eficiencia y han aumentado el rendimiento en toda la empresa.

Snowflake también ofrece importantes ventajas de seguridad, ya que cumple con estándares que no están al alcance de ninguna otra solución de datos en la nube. Gracias a estas funciones, los usuarios del autoservicio de Siemens pueden poner en marcha los recursos necesarios para llevar a cabo proyectos con datos extremadamente confidenciales en tan solo unos minutos en lugar de semanas. 

“La capacidad de proporcionar a los usuarios una plataforma de autoservicio que cumple con los más altos requisitos de seguridad y gobernanza hace que las personas encuentren nuevas formas de trabajar con los datos y les permite obtener información a escala”, afirma Meyer.

Tras su éxito al mover la mayoría de sus aplicaciones heredadas a la nube, ahora Siemens pretende ampliar su alcance más allá de sus procesos internos; su intención es crear nuevas fuentes de ingresos ofreciendo soluciones avanzadas de automatización de datos como servicio. 

“El valor de Snowflake se encuentra en la forma en que la plataforma nos permite procesar y compartir datos”, sostiene Meyer. “No solo eso, la completa integración de Snowflake con los principales proveedores de servicios en la nube es un valor añadido real. Para una empresa de la envergadura de Siemens, esta integración mejora enormemente la eficiencia y el rendimiento de nuestra pila de TI, así como de nuestras plataformas e iniciativas tecnológicas”.