Bir veri bilimcinin Amazon S3'te 20 TB'lık CSV verisi var ve bunu en az çabayla Apache Parquet'e dönüştürmesi gerekiyor. Bu dönüştürmeyi gerçekleştirmenin en basit yolu nedir?
Bir cevap seçin
Cevabınızı kontrol etmek için bir seçeneğe dokunun.
Doğru cevap: CSV'yi okumak ve Parquet çıktısı yazmak için bir dönüştürme betiği yazın ve bunu bir AWS Glue job olarak çalıştırın..
Neden bu cevap
Doğru cevap, bir dönüştürme betiği yazıp bunu bir AWS Glue işi olarak çalıştırmaktır. AWS Glue, sunucusuz bir veri entegrasyon hizmetidir ve büyük veri kümelerini dönüştürmek için tasarlanmıştır. Bir Glue işi, CSV verilerini okuyabilir ve optimize edilmiş Parquet formatında yazabilir, bu da en az çabayla büyük ölçekli dönüşümler için idealdir. Bir AWS Glue crawler kullanmak verileri Parquet'e dönüştürmez, yalnızca meta verileri çıkarır. Bir Amazon EMR kümesi kullanmak daha fazla yönetim ve yapılandırma gerektirir. Amazon SageMaker notebook'tan bir betik çalıştırmak, büyük veri kümeleri için ölçeklenebilirlik ve maliyet etkinliği açısından Glue işi kadar verimli değildir.
Sonsuz cevap arayışı olmadan sınavınızı geçin
Bu sınav için her doğrulanmış soruyu ve açıklamayı tek bir yerde edinin ve saatlerce süren hazırlıktan tasarruf edin. 1.000'den fazla sertifika · 20'den fazla dil · ücretsiz başlayın.
Sınavınızı daha hızlı geçin → Kart gerekmez