某應用程式每小時會將數百個 1 GB 的 .csv 檔案放入 Amazon S3 儲存貯體中。每個上傳的檔案都必須轉換為 Apache Parquet 格式並寫入 S3 儲存貯體。哪種解決方案能以最少的操作負擔提供所需的功能？

正確答案是建立一個 AWS Glue ETL 任務，並透過 Lambda 函數在每次 S3 PUT 事件時觸發。AWS Glue 是一個完全託管的 ETL 服務，非常適合處理大量資料的轉換，例如將 CSV 轉換為 Parquet。Parquet 是一種優化的列式儲存格式，能有效降低儲存成本並加速查詢。Lambda 函數作為事件觸發器，確保了自動化和無伺服器操作，最大限度地減少了操作負擔。 選項一的 Lambda 函數單獨處理 1GB 檔案可能因記憶體和執行時間限制而面臨挑戰，且對於數百個檔案而言，管理和擴展會變得複雜。選項二的 Spark 任務需要額外的叢集管理，增加了操作複雜性。選項三的 Athena 定期查詢方法不符合即時轉換的需求，且流程較為間接。