Bir SageMaker eğitim işi, her biri birkaç megabayt boyutunda milyonlarca S3 dosyasını okuyor ve eğitim performansı yavaş. Eğitimin verimini en hızlı şekilde hangi değişiklik artırır?
Bir cevap seçin
Cevabınızı kontrol etmek için bir seçeneğe dokunun.
Doğru cevap: Bir Amazon FSx for Lustre dosya sistemi oluşturun, mevcut S3 bucket'ına bağlayın ve eğitim işinin FSx for Lustre'dan okumasını sağlayın..
Neden bu cevap
Milyonlarca küçük dosyanın okunması, S3'ün nesne depolama yapısı nedeniyle yüksek gecikmeye neden olabilir. FSx for Lustre, yüksek performanslı bir paralel dosya sistemidir ve S3 ile sorunsuz bir şekilde entegre olur. Bu entegrasyon, S3'teki verilerin FSx for Lustre'a önbelleğe alınmasını sağlayarak eğitim işinin verilere çok daha düşük gecikme ve daha yüksek aktarım hızıyla erişmesini sağlar. Bu, eğitim verimini en hızlı şekilde artırır. S3 Express One Zone, daha düşük gecikme sunsa da, FSx for Lustre'ın paralel dosya sistemi performansına ve S3 ile entegrasyonuna kıyasla milyonlarca küçük dosya için yeterli olmayabilir. Amazon EFS, daha yüksek gecikmeye sahip bir ağ dosya sistemidir ve bu senaryo için ideal değildir. ElastiCache (Redis OSS) bir bellek içi veri deposudur ve bu kadar büyük miktarda dosya verisini depolamak ve yönetmek için uygun değildir; genellikle anahtar-değer önbellekleme için kullanılır.
Sonsuz cevap arayışı olmadan sınavınızı geçin
Bu sınav için her doğrulanmış soruyu ve açıklamayı tek bir yerde edinin ve saatlerce süren hazırlıktan tasarruf edin. 1.000'den fazla sertifika · 20'den fazla dil · ücretsiz başlayın.
Sınavınızı daha hızlı geçin → Kart gerekmez