Um cientista de dados tem 20 TB de dados CSV no Amazon S3 e precisa convertê-los para Apache Parquet com o mínimo esforço. Qual é a maneira mais simples de realizar essa conversão?
Escolha uma resposta
Toque em uma opção para verificar sua resposta.
Resposta correta: Escrever um script de conversão e executá-lo como um job do AWS Glue para ler o CSV e gravar a saída em Parquet..
Por que esta é a resposta
A opção de escrever um script de conversão e executá-lo como um job do AWS Glue é a mais simples e eficiente para grandes volumes de dados (20 TB). O AWS Glue é um serviço de ETL sem servidor que gerencia automaticamente a infraestrutura, escalando para lidar com grandes datasets. Ele suporta nativamente a leitura de CSV e a escrita em Parquet, otimizando o processo. Usar um crawler do AWS Glue é para catalogar dados, não para converter formatos. Um cluster Amazon EMR exigiria gerenciamento de infraestrutura, o que adiciona complexidade. Um notebook Amazon SageMaker não é a ferramenta ideal para processamento de 20 TB de dados, pois não é otimizado para essa escala e pode ser caro ou lento.
Passe no seu exame — sem a busca interminável por respostas
Obtenha todas as perguntas e explicações verificadas para este exame em um só lugar e economize horas de preparação. Mais de 1.000 certificações · Mais de 20 idiomas · Grátis para começar.
Passe no seu exame mais rápido → Não é necessário cartão