Ein Dateningenieur muss eine Amazon EMR ETL-Pipeline orchestrieren, die Daten aus mehreren Quellen aufnimmt und dabei die Leistung maximiert und die Kosten minimiert. Welcher AWS-Orchestrierungsdienst ist die kostengünstigste Wahl für diese Anforderung?

AWS Step Functions ist die kostengünstigste Wahl, da es serverlos ist und nur für die Ausführung von Zustandsübergängen bezahlt wird. Es ist ideal für die Orchestrierung komplexer EMR-ETL-Pipelines, da es visuelle Workflows erstellt, die Fehlerbehandlung, Wiederholungsversuche und parallele Ausführung unterstützen. Amazon MWAA ist zwar leistungsstark, aber teurer, da es dedizierte Airflow-Umgebungen bereitstellt. Amazon EventBridge ist ein ereignisgesteuerter Dienst, der sich besser für die Auslösung von Workflows eignet als für deren Orchestrierung. AWS Glue Workflows sind auf Glue-Jobs beschränkt und bieten nicht die gleiche Flexibilität bei der Orchestrierung verschiedener AWS-Dienste wie Step Functions.