Firma musi pozyskiwać duże ilości danych z wielu źródeł, stosować sekwencyjnie wiele transformacji opartych na regułach biznesowych, obsługiwać ponowne przetwarzanie w przypadku wystąpienia błędów, być skalowalna i wymagać minimalnej konserwacji. Która usługa AWS powinna zostać użyta do orkiestracji i automatyzacji tych przepływów danych?

AWS Step Functions to usługa orkiestracji bezserwerowych przepływów pracy, która doskonale pasuje do wymagań. Umożliwia definiowanie złożonych przepływów pracy jako maszyn stanowych, które mogą sekwencyjnie stosować wiele transformacji, obsługiwać ponowne przetwarzanie w przypadku błędów (dzięki wbudowanym mechanizmom obsługi błędów i ponownych prób), skalować się automatycznie i wymagać minimalnej konserwacji. AWS Batch jest przeznaczony do uruchamiania zadań wsadowych na dużą skalę, ale nie zapewnia wbudowanej orkiestracji złożonych przepływów pracy. AWS Glue to usługa ETL, która może wykonywać transformacje, ale Step Functions lepiej nadaje się do orkiestracji wielu kroków i logiki biznesowej. AWS Lambda jest usługą obliczeniową bezserwerową, idealną do pojedynczych funkcji, ale nie do orkiestracji złożonych, wieloetapowych procesów.