Migration et intégration des données du GSE : réduction des coûts opérationnels de 20%

Innowise a construit une solution solide basée sur le cloud pour une organisation d'innovation climatique, rendant la migration et l'intégration des données plus faciles, et améliorant les rapports ESG.

Client

Industrie

Environnement

Région

Client depuis

2024

Notre client est l'une des principales organisations européennes qui fournit des services de conseil pour aider les entreprises à mettre en œuvre des politiques de développement durable et à intégrer des pratiques durables dans leurs activités.

Les informations détaillées sur le client ne peuvent être divulguées en vertu des dispositions de la NDA.

Défi

Modernisation des systèmes de données existants pour rationaliser les rapports ESG et réduire les coûts

Le client était confronté à plusieurs obstacles avec ses systèmes de données existants, principalement gérés par Talend. Cette configuration limitait la flexibilité et ne permettait pas d'atteindre les objectifs de reporting en matière de développement durable. Pour résoudre ces problèmes, le client avait besoin d'une architecture évolutive et native pour améliorer la gestion des données, réduire les coûts et prendre en charge à la fois le reporting interne et l'analyse avancée. durabilité et ESG (environnementaux, sociaux et de gouvernance). C'est alors qu'ils ont demandé de l'aide à l'équipe d'Innowise. Les principaux défis du projet étaient les suivants :

Migration et intégration des données : En transférant leurs flux de données de Talend à Azure, les fonctions avaient besoin d'un pipeline d'ingestion de données fluide, capable de gérer différentes sources telles que les serveurs SFTP et les API externes.
Soutien à l'élaboration de rapports ESG et de rapports sur le développement durable : Le client avait besoin d'une infrastructure de données pour établir des rapports précis et fiables sur les indicateurs de durabilité.
Rentabilité et évolutivité : Face à l'augmentation du volume et de la complexité des données, le client avait besoin d'une solution qui minimiserait les coûts de maintenance et optimiserait l'utilisation des ressources. Une architecture évolutive était essentielle, capable d'automatiser les flux de données, d'optimiser l'utilisation des ressources et de supporter la croissance future sans nécessiter de lourdes modifications.

Solution

Modernisation des systèmes de données existants pour rationaliser les rapports ESG et réduire les coûts

Innowise a mis en place une solution complète de migration et d'intégration des données qui couvrait tous les besoins du client. Nous avons déplacé les principaux flux de données de Talend vers Azure Functions, nous les avons reliés à Snowflake pour un traitement avancé des données et nous avons mis à niveau leur reporting ESG - en fournissant tout ce qui est nécessaire pour une gestion fluide des données et pour garder un œil sur le développement durable.

Analyse des besoins et planification

Notre analyste commercial et notre analyste ESG ont travaillé en étroite collaboration avec l'équipe du client pour approfondir ses besoins. Nous nous sommes attachés à comprendre exactement quelles données devaient être migrées depuis leur ancien système Talend et quels flux de travail étaient prioritaires. En obtenant une image claire de leurs besoins en matière de reporting ESG, nous nous sommes assurés que la solution capturerait toutes les métriques clés pour un reporting précis et transparent.

Notre équipe a également fixé des objectifs d'évolutivité à long terme pour gérer le futur volume croissant de données pour l'analyse de suivi, en concevant une architecture flexible dès le départ.

Azure fonctions setup

L'équipe d'Innowise a développé custom Azure Fonctions qui extraient automatiquement les données du système existant du client via SFTP et API. Nous avons mis en place des déclencheurs programmés pour que les transferts de données restent en phase avec les cycles de reporting ESG. Pour s'assurer que l'ensemble du processus se déroule le mieux possible et que toutes les erreurs sont résolues rapidement, nos experts ont intégré Azure Application Insights.

Grâce à l'architecture sans serveur, les coûts sont restés faibles car les ressources n'étaient utilisées que pendant le traitement des données. Contrairement aux configurations traditionnelles, il n'y avait pas de serveurs inactifs qui faisaient grimper les dépenses.

Intégration et traitement des données Snowflake

Nous avons utilisé Snowflake comme plateforme principale pour le stockage et l'analyse des données et avons créé des tables de transit pour gérer et organiser les données entrantes avant qu'elles ne subissent un traitement plus approfondi. Les fonctions Azure ont pris en charge la première série de transformations de données. D'autre part, Snowflake a pris en charge le traitement plus complexe avec des scripts SQL, en façonnant les données pour qu'elles correspondent aux métriques ESG et de durabilité et en s'assurant qu'elles respectent les normes de reporting. En outre, nous avons construit des pipelines de données pour stocker les données historiques, ce qui a permis de soutenir l'analyse des tendances et de fournir au client une vision claire de son impact sur le développement durable au fil du temps.

Intégration avec des systèmes tiers

Pour faciliter l'échange de données, nous avons intégré plusieurs systèmes tiers dans la configuration de la migration des données :

Cezanne HR : Cezanne a servi d'outil de gestion du temps centralisé pour l'ensemble de l'organisation.
Service SFTP HSBC : ce service sécurisé gère les transferts de données financières, assurant à la fois la conformité et la sécurité des données pour les transactions.
Unit4 ERP : Alors que le client utilisait principalement Unit4 comme ERP, il était en train de passer à une nouvelle plate-forme. Notre approche de l'intégration a pris en charge à la fois le système ERP actuel et le futur système ERP, ce qui a permis une transition facile sans interrompre les opérations quotidiennes.

Rapports sur le développement durable et les BSE

Pour soutenir les objectifs du client en matière de développement durable, notre équipe a mis en place une architecture de données solide qui garantit la clarté et la précision des rapports ESG. Notre solution comprend quelques éléments cruciaux :

Suivi des émissions de carbone : nous avons mis en place des pipelines de données afin d'obtenir des données sur les émissions de carbone à partir de toutes sortes de sources telles que les registres de consommation d'énergie et les registres de transport. Tout a été centralisé dans Snowflake, ce qui a permis au client d'obtenir facilement une vue claire et rationalisée de son empreinte carbone. Avec tous ces flux de données en un seul endroit, ils ont pu suivre et gérer efficacement les émissions dans l'ensemble de leurs opérations.
Collecte de données sur l'impact social : En intégrant les données des systèmes RH du client comme Cezanne, nous avons facilité la collecte de données sur l'impact social. Cette configuration permet à l'entreprise d'établir des rapports sur les indicateurs clés - comme la diversité, le temps de formation, et les projets communautaires - sans les tracas. Les flux de données automatisés fournissent une vision claire de leur performance sociale, garantissent la conformité et aident l'entreprise à affiner ses stratégies ESG.
Mesures de gouvernance : Le système a traité des données financières et opérationnelles clés provenant des services SFTP de HSBC afin d'atteindre tous les objectifs du client en matière de rapports de gouvernance, notamment en ce qui concerne l'approvisionnement éthique, la conformité et les pistes d'audit. Grâce à la précision de ces mesures, le client a pu assurer la transparence et la responsabilité de ses opérations.
Tableaux de bord en temps réel : Pour donner aux parties prenantes des informations rapides et exploitables, nous avons connecté Snowflake à Power BI et créé des tableaux de bord ESG en temps réel. Ces tableaux de bord ont mis l'accent sur les mesures clés de la durabilité, telles que la consommation d'énergie, la réduction des déchets et la diversité. Grâce aux mises à jour en temps réel, le client a pu suivre de près ses progrès en matière d'objectifs climatiques, prendre des décisions éclairées et promouvoir la responsabilité.

Sécurité des données et conformité

Nous avons assuré la sécurité de vos données en utilisant des connexions SFTP cryptées et les fonctions de sécurité solides comme le roc de Snowflake. Chaque transfert de données vers et depuis Snowflake était entièrement conforme au GDPR, ce qui est crucial pour le traitement des informations RH et ESG sensibles. De plus, nos experts en sécurité ont mis en place un contrôle d'accès basé sur les rôles (RBAC) dans Snowflake, afin que seules les bonnes personnes puissent accéder ou mettre à jour les métriques ESG.

Technologies

Langages et cadres de programmation

.NET, SQL

Services en nuage

Fonctions du Azure, Aperçu des applications du Azure

Entreposage de données

Snowflake

Protocoles de transfert de données

SFTP

Surveillance et journalisation

Moniteur Azure

Outils de visualisation

Power BI

VCS

Git, GitHub

Test

NUnit

Processus

Nous avons géré le projet selon la méthode Agile, en le divisant en phases claires et gérables afin de rester efficaces et en phase avec les objectifs du client. Chaque phase a été soigneusement planifiée, exécutée et revue avec le client. Grâce à des sprints réguliers et à l'intégration continue, nous avons pu faire avancer les choses et nous adapter rapidement au retour d'information. Notre chef de projet a organisé des réunions hebdomadaires pour partager les mises à jour, répondre aux questions et obtenir des approbations à des étapes clés. Cette approche structurée nous a permis de rester sur la bonne voie, de réduire les risques et de fournir des résultats de grande qualité dans les délais impartis, répondant parfaitement aux attentes du client.

Équipe

Chef de projet

Analyste ESG

Analyste commercial

Ingénieurs en données

Architecte de l'informatique en nuage

Consultant ESG

Ingénieur QA

Résultats

Amélioration de la précision des données et réduction des coûts d'établissement des rapports

Le projet a déjà produit des résultats significatifs, mettant le client sur la voie rapide de la réalisation de ses objectifs de développement durable. En passant à des fonctions Azure, le client a augmenté l'efficacité du traitement des données de 30%, accéléré les flux de données et réduit le temps de visibilité. L'intégration de Snowflake a permis un accès en temps réel aux mesures ESG essentielles, ce qui a augmenté la précision des rapports de 25% et amélioré la conformité et la transparence.

La configuration sans serveur a également permis de réduire les coûts opérationnels de 20%, offrant au client une solution évolutive et respectueuse du budget, prête à s'adapter aux besoins futurs. Désormais, ils sont prêts à prendre des décisions plus intelligentes, basées sur des données, et à continuer à faire progresser leurs efforts en matière d'innovation climatique.

Dans la phase suivante, le client prévoit d'ajouter l'analyse prédictive avec l'apprentissage automatique pour les prévisions ESG, d'intégrer l'IoT pour une collecte de données plus pointue, et d'adopter un contrôle de conformité alimenté par l'IA pour rester au fait de l'évolution des règles ESG.

Durée du projet

Juin 2024 - En cours

30%

amélioration de l'efficacité du traitement des données

20%

réduction des coûts opérationnels

Exemples de projets similaires

Contactez nous

Reservez un appel ou remplissez le formulaire ci-dessous et nous vous contacterons dès que nous aurons traité votre demande.

Nom

Entreprise

Courriel :

Téléphone

Message

Envoyez-nous un message vocal

Joindre des documents

Charger fichier

Vous pouvez joindre un fichier d'une taille maximale de 2 Mo. Formats de fichiers valables : pdf, jpg, jpeg, png.

En cliquant sur Envoyer, vous consentez à ce qu'Innowise traite vos données personnelles conformément à notre politique de confidentialité. Politique de confidentialité pour vous fournir des informations pertinentes. En communiquant votre numéro de téléphone, vous acceptez que nous puissions vous contacter par le biais d'appels vocaux, de SMS et d'applications de messagerie. Les tarifs des appels, des messages et des données peuvent s'appliquer.

Vous pouvez également nous envoyer votre demande
à contact@innowise.com

Que se passe-t-il ensuite?

Une fois que nous aurons reçu et traité votre demande, nous prendrons contact avec vous pour détailler les besoins de votre projet et signer un accord de confidentialité.

Après avoir examiné vos souhaits, vos besoins et vos attentes, notre équipe élaborera une proposition de projet avec l'étendue des travaux, la taille de l'équipe, les délais et les coûts estimés.

Nous prendrons rendez-vous avec vous pour discuter de l'offre et régler les détails.

Enfin, nous signons un contrat et commençons immédiatement à travailler sur votre projet.