Una empresa desea ejecutar cargas de trabajo de computación de alto rendimiento (HPC) en AWS para el modelado de riesgo financiero. Las cargas de trabajo se ejecutan en Linux, utilizan cientos de instancias Spot de Amazon EC2, son de corta duración y generan miles de archivos de salida que deben almacenarse de forma persistente para análisis y uso futuro. La empresa necesita una solución de almacenamiento en la nube que permita copiar datos locales a un almacenamiento persistente a largo plazo accesible para todas las instancias EC2, y un sistema de archivos de alto rendimiento integrado con almacenamiento persistente para leer y escribir conjuntos de datos y salidas. ¿Qué combinación de servicios de AWS cumple estos requisitos?

Amazon FSx for Lustre integrado con Amazon S3 es la solución ideal. FSx for Lustre es un sistema de archivos de alto rendimiento optimizado para cargas de trabajo HPC, ofreciendo el rendimiento necesario para leer y escribir grandes volúmenes de datos rápidamente. Su integración con S3 permite almacenar los miles de archivos de salida de forma persistente y a largo plazo, y también facilita la copia de datos locales a S3 para que sean accesibles por todas las instancias EC2. FSx for Windows File Server no es adecuado porque las cargas de trabajo se ejecutan en Linux. Amazon S3 Glacier es un servicio de archivado de bajo costo, no diseñado para acceso de alto rendimiento o uso activo por instancias EC2. Un bucket de Amazon S3 con un VPC endpoint integrado con un volumen Amazon EBS gp2 no proporciona un sistema de archivos distribuido de alto rendimiento para HPC; EBS es un almacenamiento a nivel de bloque para una sola instancia, no para compartir entre cientos de instancias.