Un'azienda trasmette record CSV in tempo reale e vuole archiviarli su Amazon S3 in formato Apache Parquet. Quale opzione richiede il minor sforzo di sviluppo per convertire i dati CSV in entrata in Parquet prima di archiviarli in S3?

L'opzione corretta è la più efficiente perché Kinesis Data Firehose è progettato per acquisire, trasformare e caricare dati in streaming su S3, supportando nativamente la conversione in Parquet con il minimo sforzo di sviluppo. Kinesis Data Streams agisce come un buffer per i dati in tempo reale. Le altre opzioni richiedono più sforzo: Kafka Streams su EC2 e Spark Structured Streaming su EMR implicano la gestione di infrastrutture e lo sviluppo di codice per la trasformazione. AWS Glue è un servizio ETL serverless, ma l'integrazione diretta con Kinesis Data Streams per una trasformazione in tempo reale su S3 è meno diretta rispetto a Kinesis Data Firehose.