Um engenheiro de dados configurou um AWS Glue Data Catalog para objetos no S3 e precisa de atualizações incrementais. As notificações de eventos do S3 são enviadas para uma fila SQS. Qual combinação de etapas fornece atualizações incrementais do catálogo com o menor overhead operacional? (Escolha duas.)

As opções corretas oferecem as soluções mais eficientes para atualizações incrementais. Criar um crawler do AWS Glue baseado em eventos do S3 que lê da fila SQS automatiza a descoberta de novos objetos e atualiza o Data Catalog sem intervenção manual. Usar uma função AWS Lambda para atualizar o Data Catalog diretamente com base em eventos do S3 recebidos pela fila SQS permite um controle granular e atualizações em tempo quase real, com baixo overhead operacional. Agendar um crawler do AWS Glue para ser executado em um cronograma baseado em tempo não é incremental e pode levar a varreduras desnecessárias. Acionar manualmente o crawler do AWS Glue é ineficiente e não escalável. Usar o AWS Step Functions para orquestrar atualizações é uma solução mais complexa e com maior overhead para este caso de uso específico.