Bir şirketin bulut tabanlı veri kaynakları (Amazon RDS ve Redshift gibi yapılandırılmış kaynaklar ve S3'teki yarı yapılandırılmış dosyalar) için merkezi bir veri kataloğuna ve meta veri yönetimine ihtiyacı var. Katalog düzenli olarak yenilenmeli ve minimum operasyonel yük ile meta veri değişikliklerini tespit etmelidir. Hangi çözüm bu gereksinimleri karşılar?

Doğru cevap, AWS Glue Data Catalog'u merkezi bir meta veri deposu olarak kullanmayı ve çeşitli veri depolarına bağlanmak, meta veri değişikliklerini tespit etmek ve kataloğu güncellemek için AWS Glue crawler'ları yapılandırmayı önerir. Crawler'lar düzenli aralıklarla çalışacak şekilde zamanlanabilir, bu da minimum operasyonel yük ile otomatik yenileme sağlar. Bu, AWS'nin bu tür bir kullanım durumu için tasarlanmış yönetilen bir hizmetidir. Diğer seçenekler daha fazla manuel geliştirme ve bakım gerektirir. Amazon Aurora veya DynamoDB'yi veri kataloğu olarak kullanmak, özel Lambda işlevleri oluşturmayı ve sürdürmeyi gerektirir, bu da operasyonel yükü artırır. Son yanlış seçenek, RDS ve Redshift için şemayı manuel olarak çıkarmayı önerir ve bu da otomatikleştirilmiş, düşük operasyonel yüklü bir çözüm gereksinimini karşılamaz.