Uma empresa de transporte coleta registros de geolocalização de veículos de 10 bytes cada, recebendo até 10.000 registros por segundo. Alguns minutos de atraso na transmissão são aceitáveis. Eles usarão o Amazon Kinesis Data Streams e precisam de um mecanismo confiável para enviar dados, maximizando a eficiência da taxa de transferência do shard. Qual opção é a mais operacionalmente eficiente?

A Kinesis Producer Library (KPL) é a opção mais operacionalmente eficiente porque oferece agregação e coleta automática de registros, o que maximiza a eficiência da taxa de transferência do shard ao agrupar vários registros de usuário em um único registro Kinesis Data Streams. Isso reduz o número de chamadas à API e melhora a utilização da capacidade do shard. O Kinesis Agent é adequado para coletar dados de arquivos, mas não para um fluxo contínuo de registros em tempo real de uma aplicação. O Amazon Kinesis Data Firehose é um serviço totalmente gerenciado para carregar dados em destinos como S3, Redshift ou Splunk, e não um mecanismo de envio direto para Kinesis Data Streams. O Kinesis SDK oferece flexibilidade, mas exige que o desenvolvedor implemente a lógica de agregação e retry, o que é menos eficiente operacionalmente do que a KPL.