Ein Data Scientist hat 20 TB CSV-Daten in Amazon S3 und muss diese mit geringstem Aufwand in Apache Parquet konvertieren. Was ist der einfachste Weg, diese Konvertierung durchzuführen?
Wählen Sie eine Antwort
Tippen Sie auf eine Option, um Ihre Antwort zu überprüfen.
Richtige Antwort: Ein Konvertierungsskript schreiben und es als AWS Glue Job ausführen, um die CSV-Daten zu lesen und Parquet-Ausgaben zu schreiben..
Warum dies die Antwort ist
Die Ausführung eines Konvertierungsskripts als AWS Glue Job ist der einfachste Weg, da AWS Glue ein vollständig verwalteter ETL-Dienst ist, der für die Verarbeitung großer Datenmengen optimiert ist. Es bietet integrierte Konnektoren für S3 und unterstützt das Schreiben von Parquet-Dateien effizient. Ein AWS Glue Crawler ist primär für die Katalogisierung von Metadaten gedacht, nicht für die Datenkonvertierung. Obwohl ein Amazon EMR-Cluster die Aufgabe bewältigen könnte, erfordert er mehr Einrichtungs- und Verwaltungsaufwand. Ein Amazon SageMaker-Notebook ist für interaktive Entwicklung und kleinere Datensätze geeignet, aber nicht für die effiziente Batch-Konvertierung von 20 TB Daten.
Bestehen Sie Ihre Prüfung – ohne endlose Antwortsuche
Erhalten Sie jede verifizierte Frage und Erklärung für diese Prüfung an einem Ort und sparen Sie Stunden der Vorbereitung. Über 1.000 Zertifizierungen · Über 20 Sprachen · Kostenloser Start.
Bestehen Sie Ihre Prüfung schneller → Keine Karte erforderlich