Migración e integración de datos ESG: reducción de 20% en costes operativos

Innowise construyó una sólida solución basada en la nube para una organización de innovación climática, facilitando la migración e integración de datos y mejorando los informes ESG.

Cliente

Industria

Medio ambiente

Región

Cliente desde

2024

Nuestro cliente es una de las principales organizaciones europeas que prestan servicios de consultoría para ayudar a las empresas a aplicar políticas de sostenibilidad e integrar prácticas sostenibles en sus operaciones.

La información detallada sobre el cliente no puede divulgarse en virtud de las disposiciones del acuerdo de confidencialidad.

Desafío

Migración de sistemas heredados a informes ESG escalables y nativos de la nube

El cliente se enfrentaba a varios obstáculos con sus sistemas de datos heredados, gestionados en su mayoría a través de Talend. Esta configuración limitaba la flexibilidad y no cumplía sus objetivos de elaboración de informes de sostenibilidad. Para hacer frente a estos problemas, necesitaban una arquitectura escalable y nativa en la nube que mejorara la gestión de datos, redujera los costes y soportara tanto la elaboración de informes internos como los análisis avanzados para... sostenibilidad y ESG (medioambientales, sociales y de gobernanza). Fue entonces cuando pidieron ayuda al equipo de Innowise. Los principales retos del proyecto incluían:

Migración e integración de datos: Al trasladar sus flujos de trabajo de datos de Talend a Azure, las funciones necesitaban un canal de ingesta de datos fluido que pudiera gestionar diversas fuentes, como servidores SFTP y API externas.
Apoyo a la elaboración de informes ESG y de sostenibilidad: El cliente necesitaba una infraestructura de datos que le permitiera elaborar informes precisos y fiables sobre métricas de sostenibilidad.
Rentabilidad y escalabilidad: Con un volumen de datos y una complejidad en aumento, el cliente necesitaba una solución que minimizara los costes de mantenimiento y optimizara el uso de los recursos. Era esencial contar con una arquitectura escalable, capaz de automatizar los flujos de trabajo de datos, optimizar el uso de los recursos y soportar el crecimiento futuro sin grandes cambios.

Solución

Actualización de los sistemas de datos heredados para racionalizar los informes ESG y reducir costes

Innowise elaboró una solución completa de migración e integración de datos que cubría todas las necesidades del cliente. Trasladamos flujos de trabajo de datos clave de Talend a Azure Functions, enlazamos con Snowflake para el procesamiento avanzado de datos y actualizamos sus informes ESG, proporcionando todo lo necesario para una gestión de datos fluida y el seguimiento de la sostenibilidad.

Análisis y planificación de requisitos

Nuestro analista de negocio y nuestro analista de ESG trabajaron estrechamente con el equipo del cliente para profundizar en sus requisitos. Nos centramos en comprender exactamente qué datos debían migrarse de su sistema Talend heredado y qué flujos de trabajo eran prioritarios. Al obtener una imagen clara de sus necesidades de información ESG, nos aseguramos de que la solución capturaría todas las métricas clave para una información precisa y transparente.

Nuestro equipo también estableció objetivos de escalabilidad a largo plazo para gestionar el futuro volumen creciente de datos para el análisis de seguimiento, diseñando una arquitectura flexible desde el principio.

Configuración de las funciones del Azure

El equipo de Innowise ha desarrollado Funciones Azure personalizadas que extraen automáticamente los datos del sistema heredado del cliente a través de SFTP y API. Establecimos desencadenantes programados para mantener las transferencias de datos en línea con sus ciclos de informes ESG. Para asegurarse de que todo el proceso se desarrolla con la mayor fluidez posible y de que todos los errores se resuelven con rapidez, nuestros expertos integraron Azure Application Insights.

Gracias a la arquitectura sin servidor, los costes se mantuvieron bajos, ya que los recursos solo se utilizaron durante el procesamiento de datos. A diferencia de las configuraciones tradicionales, no había servidores inactivos que generaran gastos.

Integración y tratamiento de datos en Snowflake

Utilizamos Snowflake como plataforma central para el almacenamiento y análisis de datos y creamos tablas de preparación para gestionar y organizar los datos entrantes antes de someterlos a un procesamiento más profundo. Azure Functions se encargó de la primera ronda de transformaciones de datos. Por otra parte, Snowflake se encargó del procesamiento más complejo con secuencias de comandos SQL, dando forma a los datos para que coincidieran con las métricas ESG y de sostenibilidad y asegurándose de que cumplían las normas de presentación de informes. Además, creamos canalizaciones de datos para almacenar datos históricos, lo que facilitó el análisis de tendencias y proporcionó al cliente una visión clara de su impacto en la sostenibilidad a lo largo del tiempo.

Integración con sistemas de terceros

Para facilitar el intercambio de datos, integramos varios sistemas de terceros en la configuración de la migración de datos:

Cezanne HR: Cezanne se convirtió en la herramienta centralizada de gestión del tiempo en toda la organización.
Servicio SFTP de HSBC: este servicio seguro gestiona las transferencias de datos financieros, proporcionando tanto el cumplimiento de la normativa como la seguridad de los datos de las transacciones.
Unidad4 ERP: Aunque el cliente utilizaba principalmente Unit4 como ERP, estaba en proceso de cambiar a una nueva plataforma. Nuestro enfoque de integración era compatible tanto con el sistema ERP actual como con el futuro, lo que permitió una transición sencilla sin interrumpir las operaciones diarias.

Informes de sostenibilidad y EGS

Para apoyar los objetivos de sostenibilidad del cliente, nuestro equipo creó una sólida arquitectura de datos que garantiza que sus informes ESG sean claros y precisos. Nuestra solución incluía algunas partes cruciales:

Seguimiento de las emisiones de carbono: creamos canales de datos para extraer datos sobre emisiones de carbono de todo tipo de fuentes, como registros de consumo energético y de transporte. Todo se centralizó en Snowflake, lo que facilitó al cliente la obtención de una visión clara y racionalizada de su huella de carbono. Con todos estos flujos de datos en un solo lugar, podían seguir y gestionar eficazmente las emisiones en todas sus operaciones.
Recogida de datos sobre el impacto social: Al integrar los datos de los sistemas de RRHH del cliente, como Cezanne, facilitamos la recopilación de métricas de impacto social. Esta configuración permite a la compañía informar sobre métricas clave -como la diversidad, el tiempo de formación y los proyectos comunitarios- sin complicaciones... Los flujos de datos automatizados proporcionan una visión clara de su desempeño social, garantizan el cumplimiento y ayudan a la empresa a afinar sus estrategias ESG.
Métricas de gobernanza: El sistema procesaba datos financieros y operativos clave de los servicios SFTP de HSBC para alcanzar todos los objetivos de información de gobernanza del cliente, incluidos aspectos como el abastecimiento ético, el cumplimiento y las pistas de auditoría. Con la información precisa de estos parámetros, el cliente podía mantener la transparencia y la responsabilidad de sus operaciones.
Cuadros de mando en tiempo real: Para ofrecer a las partes interesadas información rápida y práctica, conectamos Snowflake a Power BI y creamos cuadros de mando ESG en tiempo real. Estos cuadros de mando pusieron de relieve las principales métricas de sostenibilidad, como el consumo de energía, la reducción de residuos y la diversidad. Con actualizaciones en tiempo real, el cliente podía seguir de cerca su progreso hacia los objetivos climáticos, tomando decisiones informadas y promoviendo la responsabilidad.

Seguridad y conformidad de los datos

Mantuvimos tus datos a salvo utilizando conexiones SFTP cifradas y las sólidas funciones de seguridad de Snowflake. Todas las transferencias de datos hacia y desde Snowflake cumplían plenamente la normativa GDPR, lo que es crucial para gestionar información sensible de RRHH y ESG. Además, nuestros expertos en seguridad establecieron un control de acceso basado en funciones (RBAC) en Snowflake, de modo que solo las personas adecuadas pudieran acceder a las métricas ESG o actualizarlas.

Tecnologías

Lenguajes y marcos de programación

.NET, SQL

Servicios en cloud

Azure Funciones, Azure Perspectivas de aplicación

Almacenamiento de datos

Snowflake

Protocolos de transferencia de datos

SFTP

Supervisión y registro

Azure Monitor

Herramientas de visualización

Power BI

VCS

Git, GitHub

Pruebas

NUnit

Proceso

Gestionamos el proyecto de forma ágil, dividiéndolo en fases claras y manejables para mantener la eficacia y la sincronía con los objetivos del cliente. Cada fase se planificó, ejecutó y revisó cuidadosamente con el cliente. Gracias a los sprints regulares y a la integración continua, mantuvimos las cosas en movimiento y nos adaptamos rápidamente a los comentarios. Nuestro gestor de proyectos mantuvo reuniones semanales para compartir actualizaciones, responder preguntas y obtener aprobaciones en hitos clave. Este enfoque estructurado nos mantuvo en el buen camino, redujo los riesgos y nos ayudó a ofrecer resultados de alta calidad justo a tiempo, cumpliendo a la perfección las expectativas del cliente.

Equipo

Jefe de proyecto

Analista ESG

Analista de negocio

Ingenieros de datos

Arquitecto de la nube

Consultor ESG

Ingeniero de QA

Resultados

Mejora de la precisión de los datos y reducción de los costes de elaboración de informes

El proyecto ya ha dado resultados significativos, lo que sitúa al cliente en la vía rápida para alcanzar sus objetivos de sostenibilidad. Al cambiar a las funciones Azure, el cliente aumentó la eficiencia del procesamiento de datos en 30%, aceleró los flujos de datos y redujo el tiempo de obtención de información. La integración de Snowflake proporcionó acceso en tiempo real a métricas ESG críticas, lo que aumentó la precisión de los informes en 25% y mejoró el cumplimiento y la transparencia.

La configuración sin servidor también redujo los costes operativos en 20%, lo que proporcionó al cliente una solución escalable y asequible preparada para crecer con las necesidades futuras. Ahora, están preparados para tomar decisiones más inteligentes basadas en datos y seguir avanzando en sus esfuerzos de innovación climática.

En la siguiente fase, el cliente planea añadir análisis predictivo con aprendizaje automático para la previsión de ESG, integrar IoT para una recopilación de datos más nítida y adoptar la supervisión del cumplimiento impulsada por IA para mantenerse al tanto de la evolución de las normas de ESG.

Duración del proyecto

Junio de 2024 - En curso

30%

aumento de la eficacia del tratamiento de datos

20%

reducción de los costes operativos

Casos relacionados

Contáctenos

Reservar una llamada o rellene el siguiente formulario y nos pondremos en contacto con usted cuando hayamos procesado su solicitud.

Nombre

Empresa

Correo electrónico

Teléfono

Mensaje Por favor, facilítenos detalles del proyecto, duración, tecnologías, especialistas informáticos necesarios y otra información relevante.

Grabe un mensaje de voz sobre su proyecto
para ayudarnos a comprenderlo mejor.

Adjunte los documentos adicionales si es necesario

Cargar archivo

Puede adjuntar hasta 1 archivo de 2 MB en total. Archivos válidos: pdf, jpg, jpeg, png

Le informamos de que, al hacer clic en el botón Enviar, el Grupo Innowise procesará sus datos personales de acuerdo con nuestra política de privacidad. Política de privacidad con el fin de proporcionarle información adecuada. Al facilitar un número de teléfono y enviar este formulario, acepta que nos pongamos en contacto con usted por SMS. Pueden aplicarse tarifas de mensajes y datos. Puede responder STOP para no recibir más mensajes. Responda a Ayuda para obtener más información.

¿Qué pasa después?

Una vez recibida y procesada su solicitud, nos pondremos en contacto con usted para detallar las necesidades de su proyecto y firmar un acuerdo de confidencialidad que garantice la confidencialidad de la información.

Después de examinar los requisitos, nuestros analistas y desarrolladores elaboran una propuesta de proyecto con el alcance de las obras, el tamaño del equipo, el tiempo y las estimaciones de costos.

Concertamos una reunión con usted para discutir la oferta y llegar a un acuerdo.

Firmamos un contrato y comenzamos a trabajar en su proyecto lo más rápido posible.