Uma empresa de mídia espera milhões de eventos diários entregues a um stream de dados do Amazon Kinesis. A empresa deve transformar esses eventos e ingeri-los em um domínio do Amazon OpenSearch Service para análise em tempo real. Qual método de ingestão tem a MENOR sobrecarga operacional?

A opção correta é usar o Amazon Kinesis Data Firehose com uma função AWS Lambda. O Kinesis Data Firehose é um serviço totalmente gerenciado que pode capturar, transformar e carregar dados de streaming para o Amazon OpenSearch Service. Ele oferece integração nativa com o Lambda para transformações de dados, minimizando a sobrecarga operacional, pois não há servidores para provisionar ou gerenciar. As outras opções são menos ideais: Um pipeline do Logstash exigiria o gerenciamento de instâncias do Logstash, aumentando a sobrecarga operacional. O Amazon Kinesis Agent é um coletor de dados que envia dados para o Kinesis Data Streams ou Firehose, não um mecanismo de transformação ou entrega direta ao OpenSearch Service por meio de uma função Lambda. A Kinesis Client Library (KCL) é usada para processar dados de um Kinesis Data Streams, exigindo que você gerencie sua própria frota de instâncias de computação para executar o código da KCL, o que aumenta significativamente a sobrecarga operacional.