Je hebt twee Cloud Composer-omgevingen (dev en prod) en een Git-repo voor DAG-code. Je wilt dat DAG's automatisch naar Composer worden geïmplementeerd wanneer een specifieke Git-tag wordt gepusht. Welke implementatieworkflow moet je implementeren?

De correcte workflow maakt gebruik van Cloud Build om DAG-code rechtstreeks naar de Cloud Storage-bucket van de Composer-omgeving te kopiëren. Cloud Composer laadt DAG's automatisch vanuit deze bucket, wat de standaard en meest efficiënte methode is voor DAG-implementatie. Door eerst naar de ontwikkelomgeving te kopiëren voor testen en daarna, bij succes, naar de productieomgeving, wordt een robuust CI/CD-proces gecreëerd. De andere opties zijn incorrect omdat ze onnodig complexe methoden introduceren, zoals het bouwen van containers en het gebruik van KubernetesPodOperator om DAG's te implementeren. Hoewel Composer op GKE draait, is directe interactie met GKE voor DAG-implementatie niet de aanbevolen methode; Composer beheert dit intern via de Cloud Storage-bucket.