Een bedrijf gebruikt AWS Lake Formation om een data lake te beheren dat gestructureerde en ongestructureerde data bevat. ML-engineers worden toegewezen aan specifieke advertentiecampagnes en moeten data kunnen opvragen met Amazon Athena en objecten direct in S3 kunnen bekijken. Elke engineer mag alleen toegang krijgen tot resources voor de campagnes waaraan ze zijn toegewezen. Wat is de meest operationeel efficiënte oplossing om campagnematige toegang af te dwingen?

De meest operationeel efficiënte oplossing is het gebruik van Lake Formation. Lake Formation biedt een gecentraliseerd autorisatiemodel voor data lakes. Door Lake Formation te gebruiken om AWS Glue-toegang tot de S3-buckets te autoriseren en Lake Formation-tags toe te passen, kunt u fijnmazige toegang op basis van campagnes afdwingen. ML-engineers kunnen vervolgens aan deze tags worden gekoppeld, waardoor ze alleen toegang krijgen tot de data die relevant is voor hun toegewezen campagnes, zowel via Athena als direct in S3. Incorrecte opties: IAM-beleid op de AWS Glue Data Catalog beperkt alleen de toegang via Athena en niet direct tot S3-objecten. Het gebruik van DynamoDB en Lambda om S3-bucketbeleid bij te werken is complex en operationeel minder efficiënt dan Lake Formation, dat hiervoor is ontworpen. S3-bucketbeleid instellen per campagne is bewerkelijk en schaalt slecht, vooral bij een groot aantal campagnes en engineers.