ある企業は、eコマースのPIIを含むデータセットをS3に保存しています。社内の分析アプリケーションはPIIを必要とせず、企業はPIIの不必要な共有を避ける必要があります。データエンジニアは、運用上のオーバーヘッドを最小限に抑えながら、アプリケーションごとの動的な匿名化を実装する必要があります。エンジニアはどのソリューションを選択すべきですか？

S3 Object Lambdaは、S3からデータを取得する際に、Lambda関数を使用して動的にデータを変換できるため、この要件に最適です。これにより、単一のデータセットを維持しながら、アクセスするアプリケーションの要件に基づいてPIIを匿名化できます。運用オーバーヘッドも最小限に抑えられます。 S3バケットポリシーと複数のデータセットのコピーを作成する方法は、データ重複と管理の複雑さを増大させ、動的な匿名化の要件を満たしません。AWS Glueで複数のデータセットのコピーを作成する方法も同様にデータ重複と管理の複雑さの問題があります。API GatewayはHTTPベースのアクセスを提供しますが、S3のオブジェクトアクセスパスに直接統合されるS3 Object Lambdaと比較して、より複雑なアーキテクチャと追加のレイテンシーが発生する可能性があります。