ある企業がCSVレコードをリアルタイムでストリーミングしており、それらをApache Parquet形式でAmazon S3に保存したいと考えています。受信するCSVデータをS3に保存する前にParquetに変換するために、開発作業が最も少ないオプションはどれですか？

Amazon Kinesis Data StreamsとAmazon Kinesis Data Firehoseを組み合わせることで、リアルタイムのCSVデータをParquet形式に変換してAmazon S3に保存する最も開発作業の少ない方法を提供します。Kinesis Data Firehoseは、ストリーミングデータをS3に配信する際に、データ形式の変換（CSVからParquetなど）をネイティブにサポートしており、追加のコード開発やサーバー管理が不要です。 他の選択肢はより多くの開発作業を必要とします。EC2とApache Kafka Streams、またはEMRクラスターとApache Spark Structured Streamingは、カスタムコードの記述とインフラストの管理が必要です。Amazon Kinesis Data StreamsとAWS Glueの組み合わせは可能ですが、Glueジョブの設定と管理が必要となり、Firehoseのネイティブ機能と比較して開発作業が増えます。