Klaster analityczny big data będzie działał na wielu instancjach Linux Amazon EC2 w wielu strefach dostępności. Każdy węzeł musi mieć dostęp do odczytu/zapisu do współdzielonej, bazowej pamięci masowej plików. System plików musi być zgodny z POSIX, wysoce dostępny, odporny na awarie i obsługiwać bardzo wysoką przepustowość. Które rozwiązanie pamięci masowej spełnia te wymagania?

Amazon EFS w trybie wydajności Max I/O jest najlepszym rozwiązaniem, ponieważ zapewnia współdzielony, skalowalny system plików zgodny z POSIX, który jest wysoce dostępny, odporny na awarie i obsługuje bardzo wysoką przepustowość wymaganą przez klastry analityczne big data. Może być montowany na wielu instancjach EC2 w wielu strefach dostępności. Tryb Max I/O jest zoptymalizowany pod kątem aplikacji wymagających najwyższej przepustowości i operacji I/O na sekundę (IOPS). AWS Storage Gateway z udziałem NFS opartym na S3 nie zapewnia zgodności z POSIX ani wysokiej przepustowości wymaganej dla klastrów big data. Woluminy Amazon EBS są przeznaczone dla pojedynczych instancji EC2 i nie mogą być współdzielone między wieloma instancjami. Amazon EFS w trybie General Purpose jest odpowiedni dla wielu obciążeń, ale tryb Max I/O jest zoptymalizowany pod kątem najwyższej przepustowości, co jest kluczowe dla klastrów analitycznych big data.