Um desenvolvedor está depurando um trabalho do AWS Glue que lê do S3 e grava no Amazon Redshift. Os bookmarks estão habilitados e a simultaneidade máxima está definida como 1. O trabalho grava com sucesso no Redshift, mas as execuções subsequentes reprocessam arquivos que já foram carregados em execuções anteriores. Qual é a causa mais provável?

A ausência de uma instrução commit no script do AWS Glue é a causa mais provável. Para que os bookmarks do Glue funcionem corretamente, o trabalho deve indicar explicitamente que os dados foram processados com sucesso e que o estado do bookmark pode ser atualizado. Sem um commit, o Glue não registra o progresso, levando ao reprocessamento de arquivos em execuções subsequentes. A permissão s3:GetObjectAcl não é diretamente necessária para o funcionamento básico dos bookmarks. A simultaneidade máxima de 1 não impede o funcionamento dos bookmarks, apenas limita execuções paralelas. A versão do AWS Glue raramente causaria esse comportamento específico de reprocessamento, a menos que fosse uma versão muito antiga com bugs conhecidos.