Een bedrijf ontvangt dagelijks 2 GB aan verkooptransactiegegevens in een MySQL-database en heeft 100 GB aan verkoopkansen opgeslagen in Salesforce. Het bedrijf wil een nachtelijk proces om de twee datasets te correleren met minimale operationele overhead. Welke oplossing voldoet aan deze vereiste?

De correcte oplossing maakt gebruik van de juiste AWS-services voor elk onderdeel van de vereiste. Amazon AppFlow is ideaal voor het ophalen van gegevens uit SaaS-applicaties zoals Salesforce, wat de 100 GB aan verkoopkansen efficiënt verwerkt. AWS Glue is een serverloze ETL-service die uitstekend geschikt is voor het extraheren van gegevens uit een MySQL-database (2 GB dagelijks), het transformeren ervan en het laden voor correlatie. AWS Step Functions biedt een robuuste, serverloze manier om de workflow te orkestreren, inclusief de sequentiële stappen van data-extractie, correlatie en eventuele verdere verwerking, met minimale operationele overhead. De andere opties zijn minder optimaal. Het gebruik van Lambda-functies voor correlatie kan complex worden voor grotere datasets en vereist meer handmatige ontwikkeling. Amazon Kinesis Data Streams en Apache Flink zijn meer gericht op real-time streamverwerking, wat niet nodig is voor een nachtelijk batchproces. MWAA is een krachtige orchestrator, maar Step Functions is vaak eenvoudiger en kosteneffectiever voor dit type serverloze, stapsgewijze workflow.