한 연구소에서 약 8TB의 데이터를 서브 밀리초 지연 시간과 최소 6GBps의 스토리지 처리량으로 처리해야 합니다. 수백 개의 Amazon Linux EC2 인스턴스가 데이터를 분산하고 처리할 것입니다. 어떤 솔루션이 성능 요구 사항을 충족할까요?

정답은 Amazon S3에 원시 데이터를 저장하고 영구 SSD 스토리지를 사용하는 Amazon FSx for Lustre 파일 시스템을 생성하는 것입니다. FSx for Lustre는 고성능 컴퓨팅(HPC) 워크로드에 최적화되어 있으며, 서브 밀리초 지연 시간과 수백 GBps의 처리량을 제공하여 요구 사항인 6GBps를 충족합니다. S3와의 통합을 통해 대규모 데이터 세트를 쉽게 가져오고 내보낼 수 있습니다. 오답인 Amazon FSx for NetApp ONTAP은 주로 엔터프라이즈 파일 워크로드에 사용되며, Lustre만큼의 극단적인 고성능을 제공하지 않을 수 있습니다. 특히 "ALL" 티어링 정책은 성능 저하를 일으킬 수 있습니다. 영구 HDD 스토리지를 사용하는 FSx for Lustre는 SSD만큼의 낮은 지연 시간과 높은 처리량을 제공하지 못합니다.