Vous avez trois tâches (transformation Dataflow->BigQuery, ingestion sur site->Cloud Storage, tiers Dataflow->Cloud Storage) qui nécessitent une planification, une surveillance et des exécutions manuelles. Quelle approche d'orchestration utilisez-vous ?

Cloud Composer, basé sur Apache Airflow, est la solution d'orchestration de flux de travail entièrement gérée de Google Cloud. Il permet de créer des graphes acycliques dirigés (DAG) pour définir, planifier et surveiller des séquences complexes de tâches, ce qui correspond parfaitement aux besoins de planification, de surveillance et d'exécution manuelle des trois tâches mentionnées. Stackdriver Monitoring est un outil de surveillance et d'alerte, pas un orchestrateur de flux de travail. Une application App Engine ou des tâches cron sur Compute Engine pourraient planifier des tâches, mais elles n'offrent pas la même richesse fonctionnelle pour la gestion de dépendances, la surveillance visuelle, la journalisation centralisée et la gestion des échecs que Cloud Composer.