Rekommendationssystem: 72% förbättrad korsförsäljning genom datainsamling för onlinebutiker

AUTOMATISERING AV DATAHANTERINGEN.

AWS är en molnplattform från Amazon för att göra det möjligt för appleverantörer, ISV och leverantörer att snabbt och säkert vara värd för sina lösningar - oavsett om det är en befintlig app eller en ny SaaS-baserad app. AWS Systems Manager Parameter Store säkerställer ett säkert arkiv för hantering av konfigurationsdata och lösenord. Vår uppgift var att automatisera att lägga till nya eller ändra föråldrade konfigurationer eller känsliga lösenord eller data så att en användare inte behöver göra det manuellt via det grafiska gränssnittet.

INSTÄLLNING AV LUFTFLÖDE

I luftflöde utformas och uttrycks arbetsflöden som dag, där varje DAG-steg definieras som en specifik uppgift. Den är utformad med vetskapen om att all datautvinning, transformation, laddning och manipulationsprocesser bäst uttrycks som kod, och som sådan är det en kodbaserad plattform som gör det möjligt att iterera arbetsflöden snabbt och effektivt. Eftersom Airflow är mycket effektivt för att organisera och schemalägga arbetsflöden för datapipeline använder vi det för att ställa in de förutbestämda händelserna. DAG kan köras varje timme eller till exempel var 3:e timme 30 minuter, och så vidare. Om alla uppgifter i DAG slutfördes framgångsrikt anses DAG vara framgångsrikt genomförd. Det är bekvämt eftersom Dag körs hela tiden utan manuella åtgärder som behövs.