Ein Unternehmen betreibt AWS-Ressourcen über mehrere Regionen hinweg und verfügt über ein Amazon EFS-Dateisystem in jeder Region. Das Data-Science-Team arbeitet nur in einer Region, und seine Daten müssen in dieser Region verbleiben. Ein Dateningenieur muss einen konsolidierten Datensatz erstellen, indem er Dateien verarbeitet, die auf jedem regionalen EFS gespeichert sind, und zwar mithilfe einer Step Functions-Zustandsmaschine, die Lambda-Funktionen orchestriert. Welche Option erreicht dies mit dem geringsten Aufwand?

Die korrekte Option ist AWS DataSync, da es eine effiziente und verwaltete Lösung für die Übertragung großer Datenmengen zwischen EFS-Dateisystemen in verschiedenen Regionen bietet. DataSync automatisiert den Datentransfer und stellt sicher, dass die Daten konsolidiert und in der Region des Data-Science-Teams verfügbar sind, bevor die Lambda-Funktionen sie verarbeiten. Dies minimiert den Betriebsaufwand. Die VPC-Peering-Option ist komplexer und kann zu Latenzproblemen führen, da die Daten über das Netzwerk abgerufen werden müssen. EFS Cross-Region Replication ist für die kontinuierliche Replikation gedacht, nicht für eine einmalige oder ereignisgesteuerte Konsolidierung, und würde unnötige Kosten und Komplexität für diesen Anwendungsfall verursachen. Lambda-Funktionen in jeder Region bereitzustellen, um Daten in S3 zu schreiben, würde die Daten in S3 speichern, anstatt sie auf EFS zu konsolidieren, was die Anforderung des Data-Science-Teams, Daten in EFS zu verarbeiten, nicht erfüllt.