Inżynier danych projektuje hybrydowy przepływ pracy orkiestracji danych, który wykorzystuje zarówno zasoby lokalne, jak i chmurowe, i chce priorytetyzować przenośność oraz narzędzia open-source. Która usługa powinna być używana w obu środowiskach?

Amazon Managed Workflows for Apache Airflow (Amazon MWAA) jest poprawną odpowiedzią, ponieważ Apache Airflow to popularne, otwarte narzędzie do orkiestracji przepływów pracy, które jest przenośne i może być uruchamiane zarówno w środowiskach lokalnych, jak i w chmurze. MWAA to zarządzana usługa AWS dla Apache Airflow, co ułatwia jego wdrożenie i skalowanie w chmurze, jednocześnie zachowując kompatybilność z lokalnymi instancjami Airflow. AWS Data Exchange to usługa do znajdowania i subskrybowania danych, a nie orkiestracji. Amazon Simple Workflow Service (SWF) to usługa orkiestracji, ale jest starsza i mniej przenośna niż Airflow, a także nie jest oparta na otwartym kodzie źródłowym. AWS Glue to usługa ETL, a nie narzędzie do orkiestracji przepływów pracy.