Un set di processi AWS Glue (orchestrati da un workflow AWS Glue) produce dati utilizzati da Amazon SageMaker Pipelines. I processi Glue possono essere eseguiti su una pianificazione o avviati manualmente. È necessario integrare questi processi Glue nelle pipeline SageMaker con il minimo overhead operativo. Quale approccio soddisfa questo requisito?

L'opzione corretta è utilizzare gli step Callback in SageMaker Pipelines. Questo approccio permette a SageMaker Pipelines di avviare un workflow AWS Glue e di attendere il suo completamento prima di procedere, integrando così i processi Glue direttamente nel flusso di lavoro della pipeline con un minimo overhead operativo. Le altre opzioni sono meno efficienti o non adatte: L'utilizzo di AWS Step Functions introdurrebbe un ulteriore livello di orchestrazione, aumentando la complessità e l'overhead operativo. Gli step di elaborazione all'interno di SageMaker Pipelines sono pensati per eseguire codice di elaborazione dati direttamente su SageMaker, non per invocare e monitorare workflow AWS Glue esterni. Amazon EventBridge può essere usato per l'orchestrazione, ma richiederebbe una logica aggiuntiva per gestire lo stato e la sincronizzazione tra i servizi, rendendolo meno integrato e più complesso rispetto agli step Callback nativi di SageMaker Pipelines per questo specifico caso d'uso.