Um engenheiro de dados deve limpar e preparar vários terabytes de dados brutos que residem no Amazon S3 e, em seguida, carregar os dados processados no Amazon Redshift para análise. Os analistas de dados exigem a capacidade de executar consultas complexas. A solução deve eliminar a necessidade de pipelines ETL complexos e evitar o gerenciamento de infraestrutura. Qual abordagem oferece a funcionalidade necessária com o MENOR overhead operacional?

A opção correta minimiza o overhead operacional e atende aos requisitos. O AWS Glue DataBrew é uma ferramenta sem servidor e visual para limpar e normalizar dados, ideal para terabytes de dados brutos no S3 sem gerenciar infraestrutura. O AWS Glue (ETL) é nativamente integrado ao DataBrew e ao Redshift, facilitando o carregamento dos dados processados. O Amazon Redshift é a escolha ideal para consultas analíticas complexas, pois é um data warehouse otimizado para isso. A opção com EMR exige gerenciamento de clusters. A opção com Lambda pode ser complexa e cara para terabytes de dados. A opção com DMS é mais adequada para migração de bancos de dados, não para ETL contínuo, e o Redshift Spectrum é para consultar dados no S3, não para dados já carregados no Redshift.