ある金融サービス企業が、Amazon S3上にサーバーレスのデータレイクを構築しています。このデータレイクは、Amazon AthenaとRedshift SpectrumでS3の古いデータと新しいデータをクエリできること、イベント駆動型のETLパイプラインをサポートすること、そしてメタデータの検出が容易であることを要件としています。これらの要件を満たすソリューションはどれですか？

このソリューションは、すべての要件を最も効果的に満たします。AWS GlueクローラーはS3データを自動的にカタログ化し、AthenaとRedshift SpectrumがクエリできるようにAWS Glue Data Catalogにメタデータを保存します。AWS Lambdaは、S3への新しいデータ到着などのイベントに基づいてAWS Glue ETLジョブをトリガーできるため、イベント駆動型ETLパイプラインが実現します。AWS Glue Data Catalogは、メタデータ検出の一元化されたリポジトリとして機能します。 他の選択肢は、外部のApache Hive metastoreを使用したり、CloudWatchアラームでジョブをトリガーしたりするなど、要件の一部を満たさないか、より複雑な構成を必要とします。AWS Glue Data Catalogは、AWSサービスとの統合が最も優れています。