Un'azienda di analisi dati riceve periodicamente migliaia di piccoli file di dati tramite FTP. Attualmente, un processo batch on-premises li elabora durante la notte, impiegando ore. L'azienda desidera che la soluzione AWS elabori i file in arrivo il prima possibile con modifiche minime ai client FTP. La soluzione deve eliminare i file dopo l'elaborazione riuscita. L'elaborazione di ciascun file richiede 3-8 minuti. Quale soluzione soddisfa questi requisiti con la MASSIMA efficienza operativa?

La soluzione corretta utilizza AWS Transfer Family per fornire un endpoint FTP gestito che archivia direttamente i file in Amazon S3 Standard. Questo elimina la necessità di gestire un server FTP su EC2. Le notifiche di eventi S3 attivano una funzione AWS Lambda per ogni file in arrivo. Poiché l'elaborazione di ciascun file richiede 3-8 minuti, Lambda è adatta per questo carico di lavoro, consentendo l'elaborazione quasi in tempo reale e l'eliminazione automatica del file dopo l'elaborazione riuscita, soddisfacendo i requisiti di efficienza operativa e tempestività. Le opzioni che coinvolgono S3 Glacier Flexible Retrieval o volumi EBS per l'archiviazione non sono ideali: S3 Glacier è per l'archiviazione a lungo termine con tempi di recupero più lunghi, e EBS richiederebbe la gestione di istanze EC2 e volumi, aumentando il sovraccarico operativo. L'elaborazione notturna non soddisfa il requisito di elaborazione "il prima possibile". AWS Batch è più adatto per carichi di lavoro batch più grandi e complessi, non per l'elaborazione di singoli file in tempo quasi reale come richiesto qui.