Een bedrijf wil high performance computing (HPC) workloads uitvoeren op AWS voor financiële risicomodellering. De workloads draaien op Linux, gebruiken honderden Amazon EC2 Spot Instances, zijn kortstondig en genereren duizenden uitvoerbestanden die permanent moeten worden opgeslagen voor analyses en toekomstig gebruik. Het bedrijf heeft een cloudopslagoplossing nodig die het kopiëren van on-premises data naar langdurige persistente opslag mogelijk maakt die toegankelijk is voor alle EC2-instances, en een high-performance bestandssysteem geïntegreerd met persistente opslag voor het lezen en schrijven van datasets en uitvoer. Welke combinatie van AWS-services voldoet aan deze vereisten?

Amazon FSx for Lustre is een high-performance bestandssysteem geoptimaliseerd voor HPC-workloads, zoals financiële risicomodellering. Het biedt de lage latency en hoge doorvoer die nodig zijn voor duizenden kortstondige EC2 Spot Instances. Integratie met Amazon S3 maakt het mogelijk om datasets te importeren en uitvoerbestanden permanent op te slaan in S3, wat voldoet aan de eis voor langdurige persistente opslag en toegankelijkheid. Amazon FSx for Windows File Server is niet geschikt omdat de workloads op Linux draaien. Amazon S3 Glacier is archiefopslag en te traag voor actieve HPC-workloads. Een S3-bucket met een VPC-endpoint en Amazon EBS gp2-volumes is minder efficiënt voor gedeelde toegang en de hoge I/O-vereisten van HPC dan FSx for Lustre.