Você precisa ingerir dados de streaming e persistir esses dados como arquivos Apache Parquet para análise. Qual serviço da AWS ingere dados de streaming e pode entregá-los no formato Parquet para armazenamento?

Amazon Kinesis Data Firehose é a escolha correta porque é um serviço totalmente gerenciado que pode capturar, transformar e carregar dados de streaming em armazenamentos de dados como Amazon S3, Amazon Redshift, Amazon OpenSearch Service e Splunk. Ele suporta a conversão de formato de dados de entrada para Apache Parquet ou ORC antes de entregar os dados, o que é ideal para análise eficiente. AWS Database Migration Service (DMS) é usado para migrar bancos de dados para a AWS de forma rápida e segura, não para ingestão de streaming de dados. Amazon Kinesis Data Streams é um serviço de streaming de dados que exige que você escreva seu próprio código para processar e persistir os dados, e não oferece conversão de formato nativa para Parquet na entrega. Amazon Kinesis Data Analytics é usado para processar e analisar dados de streaming em tempo real usando SQL ou Apache Flink, mas não é o serviço primário para ingestão e persistência de dados em formatos específicos como Parquet.