Una empresa necesita un catálogo de datos centralizado y gestión de metadatos para fuentes de datos basadas en la nube (fuentes estructuradas como Amazon RDS y Redshift, y archivos semiestructurados en S3). El catálogo debe actualizarse regularmente y detectar cambios en los metadatos con una sobrecarga operativa mínima. ¿Qué solución cumple estos requisitos?

La opción correcta es la más eficiente y con menor sobrecarga operativa. AWS Glue Data Catalog está diseñado específicamente para ser un repositorio central de metadatos, y los AWS Glue crawlers automatizan la detección de esquemas y metadatos de diversas fuentes (RDS, Redshift, S3) y actualizan el catálogo. Esto elimina la necesidad de desarrollar y mantener código personalizado (como funciones Lambda) para la recolección y actualización de metadatos. Las opciones que proponen usar Amazon Aurora o DynamoDB como catálogo de datos, junto con funciones Lambda, implican un desarrollo y mantenimiento significativos para replicar la funcionalidad que Glue Data Catalog y sus crawlers ofrecen de forma nativa. La última opción es incorrecta porque, si bien usa Glue Data Catalog, sugiere construir el catálogo manualmente para RDS y Redshift, perdiendo el beneficio de la automatización de los crawlers para esas fuentes.