Een bedrijf moet grote hoeveelheden data uit vele bronnen opnemen, meerdere bedrijfstransformaties opeenvolgend toepassen, herverwerking ondersteunen wanneer er fouten optreden, schaalbaar zijn en minimaal onderhoud vereisen. Welke AWS-service moet worden gebruikt om deze datastromen te orkestreren en automatiseren?

AWS Step Functions is de beste keuze omdat het workfloworkestratie en -automatisering biedt voor gedistribueerde applicaties en microservices. Het ondersteunt complexe, stateful workflows met meerdere stappen, inclusief sequentiële verwerking, parallelle uitvoering en foutafhandeling, wat cruciaal is voor het herverwerken van data bij fouten. Het is schaalbaar en vereist minimaal onderhoud. AWS Batch is ontworpen voor het uitvoeren van batch-computertaken en is minder geschikt voor het orkestreren van complexe datastromen met opeenvolgende transformaties. AWS Glue is een serverloze data-integratieservice, ideaal voor ETL-taken, maar mist de geavanceerde workfloworkestratiecapaciteiten van Step Functions voor complexe, stateful processen. AWS Lambda is een serverloze compute-service voor het uitvoeren van kleine, discrete functies en is niet bedoeld voor het orkestreren van langlopende, complexe workflows.