Um cientista de dados precisa de consultas SQL quase em tempo real sobre um fluxo de arquivos compactados com GZIP. Qual opção oferece a maneira de menor latência para consultar o fluxo usando SQL?

A opção correta é usar o Amazon Kinesis Data Analytics porque ele permite executar consultas SQL diretamente em fluxos de dados em tempo real, incluindo aqueles com arquivos compactados GZIP (com uma função Lambda para descompressão, se necessário), oferecendo a menor latência para análise. O AWS Glue é uma ferramenta ETL que processa dados em lotes ou micro-lotes, introduzindo latência inaceitável para consultas "quase em tempo real". A Kinesis Client Library com Amazon Elasticsearch Service é uma solução válida para pesquisa, mas não para consultas SQL diretas de baixa latência sobre o fluxo original. O Kinesis Data Firehose entrega dados para o S3, o que é útil para armazenamento e análise posterior, mas não permite consultas SQL em tempo real sobre o fluxo.