ESG-gegevensmigratie en -integratie: 20% verlaging van operationele kosten

Innowise bouwde een solide cloudgebaseerde oplossing voor een klimaatinnovatieorganisatie, waardoor datamigratie en -integratie soepeler verlopen en de ESG-rapportage op een hoger niveau komt.

Klant

Industrie
Milieu
Regio
EU
Klant sinds
2024

Onze klant is een van de toonaangevende Europese organisaties die adviesdiensten levert om bedrijven te helpen bij het implementeren van duurzaamheidsbeleid en het integreren van duurzame praktijken in hun activiteiten.

Gedetailleerde informatie over de klant kan niet openbaar worden gemaakt krachtens de bepalingen van de NDA.

Uitdaging

Verouderde datasystemen upgraden om ESG-rapportage te stroomlijnen en kosten te verlagen

De klant had te kampen met verschillende hindernissen met hun legacy datasystemen, die meestal werden beheerd via Talend. Deze opzet beperkte de flexibiliteit en schoot tekort in het ondersteunen van hun duurzaamheidsrapportagedoelen. Om deze problemen aan te pakken, hadden ze een schaalbare, cloud-native architectuur nodig om het gegevensbeheer te verbeteren, kosten te besparen en zowel interne rapportage als geavanceerde analyses te ondersteunen voor duurzaamheid en ESG (Milieu, Maatschappelijk en Bestuur). Toen hebben ze het Innowise team om hulp gevraagd. De belangrijkste uitdagingen van het project waren

  • Migratie en integratie van gegevens: Functies hadden een soepele data ingestion pipeline nodig die overweg kon met verschillende bronnen, zoals SFTP-servers en externe API's, om hun dataworkflows over te zetten van Talend naar Azure.
  • Ondersteuning voor ESG- en duurzaamheidsrapportage: De klant had een data-infrastructuur nodig voor nauwkeurige en betrouwbare rapportage over duurzaamheidscijfers.
  • Kostenefficiëntie en schaalbaarheid: Met een toenemend datavolume en toenemende complexiteit had de klant een oplossing nodig die de onderhoudskosten minimaliseerde en het gebruik van resources optimaliseerde. Een schaalbare architectuur was essentieel - een architectuur die dataworkflows kon automatiseren, het gebruik van resources kon aanscherpen en toekomstige groei kon ondersteunen zonder veel herwerk.

Oplossing

Verouderde datasystemen upgraden om ESG-rapportage te stroomlijnen en kosten te verlagen

Innowise stelde een complete datamigratie- en integratieoplossing samen die aan alle behoeften van de klant voldeed. We verplaatsten belangrijke dataworkflows van Talend naar Azure Functions, koppelden ze aan Snowflake voor geavanceerde dataverwerking en verbeterden hun ESG-rapportage. We leverden alles wat nodig is voor soepel datamanagement en het in de gaten houden van duurzaamheid.

Analyse en planning van vereisten

Onze bedrijfsanalist en ESG-analist werkten nauw samen met het team van de klant om diep in hun vereisten te graven. We richtten ons op het begrijpen van welke gegevens precies uit hun oude Talend-systeem moesten worden gemigreerd en welke workflows prioriteit hadden. Door een duidelijk beeld te krijgen van hun ESG-rapportagebehoeften, zorgden we ervoor dat de oplossing alle belangrijke meetgegevens zou vastleggen voor nauwkeurige, transparante rapportage. 

Ons team stelde ook schaalbaarheidsdoelen voor de lange termijn om het toekomstige groeiende datavolume voor trackinganalyse aan te kunnen, door vanaf het begin een flexibele architectuur te ontwerpen.

Azure functies instellen

Het Innowise team ontwikkelde Aangepaste Azure-functies die automatisch gegevens ophalen uit het oude systeem van de klant via SFTP en API's. We stelden geplande triggers in om de gegevensoverdracht op schema te houden met hun ESG-rapportagecycli. Om ervoor te zorgen dat het hele proces zo soepel mogelijk verloopt en alle fouten snel worden opgelost, integreerden onze experts Azure Application Insights. 

Dankzij de serverloze architectuur bleven de kosten laag omdat de resources alleen werden gebruikt tijdens de gegevensverwerking. In tegenstelling tot traditionele opstellingen waren er geen ongebruikte servers die de kosten opdreven.

Snowflake-integratie en gegevensverwerking

We gebruikten Snowflake als kernplatform voor gegevensopslag en -analyse en creëerden staging tables om binnenkomende gegevens te beheren en te organiseren voordat ze verder werden verwerkt. Azure Functions handelde de eerste ronde van gegevenstransformaties af. Aan de andere kant nam Snowflake de complexere verwerking op zich met SQL-scripts, waarbij de gegevens werden aangepast aan de ESG- en duurzaamheidscriteria en voldaan werd aan de rapportagenormen. Daarnaast bouwden we datapijplijnen om historische gegevens op te slaan, die trendanalyses ondersteunden en de klant een duidelijk beeld gaven van hun duurzaamheidsimpact in de loop der tijd.

Integratie met systemen van derden

Om de gegevensuitwisseling soepel te laten verlopen, hebben we verschillende systemen van derden geïntegreerd in de opzet van de gegevensmigratie:

  • Cezanne HR: Cezanne, de go-to van de klant voor het bijhouden van urenstaten van werknemers, diende als een gecentraliseerde tool voor tijdbeheer in hun hele organisatie.
  • HSBC SFTP-service: Deze beveiligde service verwerkt financiële gegevensoverdrachten en biedt zowel compliance als gegevensbeveiliging voor transacties.
  • Unit4 ERP: Hoewel de klant voornamelijk Unit4 gebruikte als hun ERP, waren ze bezig met de overstap naar een nieuw platform. Onze integratieaanpak ondersteunde zowel de huidige als de toekomstige ERP-systemen, waardoor een eenvoudige overgang mogelijk was zonder onderbreking van de dagelijkse werkzaamheden.

Rapportage over duurzaamheid en EGS

Om de duurzaamheidsdoelstellingen van de klant te ondersteunen, stelde ons team een solide gegevensarchitectuur samen die ervoor zorgt dat hun ESG-rapportage duidelijk en nauwkeurig is. Onze oplossing omvatte een paar cruciale onderdelen:

  • Koolstofemissies bijhouden: hebben we datapijplijnen opgezet om gegevens over koolstofuitstoot op te halen uit allerlei bronnen, zoals energiegebruiksgegevens en transportlogboeken. Alles werd gecentraliseerd in Snowflake, waardoor de klant gemakkelijk een duidelijk, gestroomlijnd beeld van zijn CO2-voetafdruk kon krijgen. Met al deze gegevensstromen op één plek konden ze de uitstoot van hun activiteiten effectief bijhouden en beheren.
  • Gegevens verzamelen over sociale impact: Door gegevens uit HR-systemen van de klant, zoals Cezanne, te integreren, hebben we het eenvoudig gemaakt om statistieken over de sociale impact te verzamelen. Dankzij deze opzet kan het bedrijf rapporteren over belangrijke statistieken - zoals diversiteit, trainingstijd en gemeenschapsprojecten - zonder gedoe. Geautomatiseerde gegevensstromen geven een duidelijk beeld van hun sociale prestaties, garanderen naleving en helpen het bedrijf om hun ESG-strategieën te verfijnen.
  • Bestuurskenmerken: Het systeem verwerkte belangrijke financiële en operationele gegevens van HSBC's SFTP diensten om alle governance rapportagedoelen van de klant te halen, inclusief zaken als ethische sourcing, compliance en audit trails. Met deze nauwkeurig gerapporteerde gegevens kon de klant zijn activiteiten transparant en verantwoordelijk houden.
  • Real-time dashboards: Om belanghebbenden snelle, bruikbare inzichten te geven, verbonden we Snowflake met Power BI en bouwden we realtime ESG-dashboards. Deze dashboards brachten belangrijke duurzaamheidscijfers - zoals energieverbruik, afvalvermindering en diversiteit - in beeld. Met realtime updates kon de klant de voortgang naar klimaatdoelen nauwlettend in de gaten houden, geïnformeerde beslissingen nemen en verantwoording afleggen.

Gegevensbeveiliging en naleving

We hebben uw gegevens veilig gehouden door gebruik te maken van versleutelde SFTP-verbindingen en de ijzersterke beveiligingsfuncties van Snowflake. Elke gegevensoverdracht van en naar Snowflake was volledig GDPR-conform, wat cruciaal is voor de verwerking van gevoelige HR- en ESG-informatie. Bovendien stelden onze beveiligingsexperts RBAC (role-based access control) in Snowflake in, zodat alleen de juiste personen toegang hadden tot ESG-gegevens of deze konden bijwerken.

Technologieën

Programmeertalen en frameworks

.NET, SQL

Clouddiensten

Azure functies, Azure toepassingsinzichten

Gegevensopslag

Snowflake

Protocollen voor gegevensoverdracht

SFTP

Bewaking en registratie

Azure Monitor

Visualisatietools

Power BI

VCS

Git, GitHub

Testen

NUnit

Proces

We beheerden het project met behulp van Agile, waarbij we het opsplitsten in duidelijke, beheersbare fasen om efficiënt te blijven en in sync te blijven met de doelen van de klant. Elke fase werd zorgvuldig gepland, uitgevoerd en geëvalueerd met de klant. Dankzij regelmatige sprints en continue integratie hielden we de zaken in beweging en pasten we ons snel aan feedback aan. Onze projectmanager hield wekelijkse check-ins om updates te delen, vragen te beantwoorden en goedkeuring te krijgen bij belangrijke mijlpalen. Deze gestructureerde aanpak hield ons op koers, verminderde risico's en hielp ons op tijd resultaten van hoge kwaliteit te leveren die perfect aan de verwachtingen van de klant voldeden.

Team

1
Project Manager
1
ESG-analist
1
Bedrijfs-analist
2
Data Ingenieurs
1
Cloud Architect
1
ESG-consultant
1
QA ingenieur

Resultaten

Verbeterde nauwkeurigheid van gegevens en lagere rapportagekosten

Het project heeft al significante resultaten opgeleverd, waardoor de klant op de goede weg is om zijn duurzaamheidsdoelstellingen te halen. Door over te schakelen op Azure Functions verhoogde de klant de efficiëntie van de gegevensverwerking met 30%, versnelde hij de gegevensstromen en verkortte hij de time-to-insight. De Snowflake-integratie bood real-time toegang tot kritieke ESG-gegevens, waardoor de nauwkeurigheid van de rapportage met 25% toenam en de compliance en transparantie verbeterden. 

De serverloze opstelling verlaagde ook de operationele kosten met 20%, waardoor de klant een schaalbare, budgetvriendelijke oplossing kreeg die klaar is om mee te groeien met toekomstige behoeften. Nu zijn ze klaar om slimmere, datagestuurde beslissingen te nemen en hun inspanningen voor klimaatinnovatie voort te zetten.

In de volgende fase is de klant van plan om voorspellende analyses met machine learning toe te voegen voor ESG-voorspellingen, IoT te integreren voor scherpere gegevensverzameling en AI-gestuurde compliance monitoring toe te passen om de veranderende ESG-regels op de voet te volgen.

Duur van het project
  • Juni 2024 - Doorlopend
30%

verhoging van de efficiëntie van gegevensverwerking

20%

verlaging van operationele kosten

Contacteer ons

Boek een gesprek of vul het onderstaande formulier in en we nemen contact met je op zodra we je aanvraag hebben verwerkt.

    Stuur ons een spraakbericht
    Documenten bijvoegen
    Bestand uploaden

    Je kunt 1 bestand van maximaal 2 MB bijvoegen. Geldige bestandsformaten: pdf, jpg, jpeg, png.

    Door op Verzenden te klikken, stemt u ermee in dat Innowise uw persoonsgegevens verwerkt volgens onze Privacybeleid om u van relevante informatie te voorzien. Door je telefoonnummer op te geven, ga je ermee akkoord dat we contact met je opnemen via telefoongesprekken, sms en messaging-apps. Bellen, berichten en datatarieven kunnen van toepassing zijn.

    U kunt ons ook uw verzoek sturen
    naar contact@innowise.com

    Wat gebeurt er nu?

    1

    Zodra we je aanvraag hebben ontvangen en verwerkt, nemen we contact met je op om de details van je project te bespreken en een NDA te ondertekenen om vertrouwelijkheid te garanderen.

    2

    Na het bestuderen van je wensen, behoeften en verwachtingen zal ons team een projectvoorstel opstellen met de omvang van het werk, de grootte van het team, de tijd en de geschatte kosten.

    3

    We zullen een afspraak met je maken om het aanbod te bespreken en de details vast te leggen.

    4

    Tot slot tekenen we een contract en gaan we meteen aan de slag met je project.

    Спасибо!

    Cобщение отправлено.
    Мы обработаем ваш запрос и свяжемся с вами в кратчайшие сроки.

    Bedankt.

    Uw bericht is verzonden.
    Wij verwerken uw aanvraag en nemen zo spoedig mogelijk contact met u op.

    Bedankt.

    Uw bericht is verzonden. 

    We verwerken je aanvraag en nemen zo snel mogelijk contact met je op.

    pijl