Un ingénieur de données a construit un pipeline ETL AWS Glue et doit explorer une table dans Microsoft SQL Server, puis écrire la sortie de l'exploration dans S3 et orchestrer le pipeline. Quelle fonctionnalité AWS offre cette capacité au coût le plus bas ?

AWS Glue workflows est la solution la plus rentable car il s'intègre nativement avec AWS Glue Data Catalog et les jobs Glue, permettant une orchestration directe des étapes d'exploration et d'écriture vers S3. Il offre une gestion simplifiée et un coût optimisé pour les pipelines Glue. AWS Step Functions pourrait orchestrer ce pipeline, mais son coût peut être plus élevé pour des exécutions fréquentes et simples comme celles-ci, et il nécessite une configuration plus complexe pour interagir avec Glue. AWS Glue Studio est un environnement de développement visuel pour créer des jobs Glue, pas un orchestrateur de pipeline. Amazon MWAA est une solution d'orchestration puissante basée sur Apache Airflow, mais elle est généralement plus coûteuse et plus complexe à gérer que les workflows Glue pour des pipelines spécifiques à Glue.