Ein Überwachungssystem schreibt jede Minute 1 TB Metrikdaten in Amazon S3. Analysten fragen diese Daten mit Amazon Athena ab, aber die Abfragen sind aufgrund des Datenvolumens langsam. Welches in S3 gespeicherte Dateiformat verbessert die Athena-Abfrageleistung?

Parquet-Dateien sind ein spaltenorientiertes Dateiformat, das für analytische Abfragen optimiert ist. Athena kann nur die benötigten Spalten lesen, was die Datenmenge reduziert und die Abfrageleistung erheblich verbessert. CSV-Dateien sind zeilenorientiert und erfordern das Lesen aller Spalten, selbst wenn nur wenige benötigt werden. Komprimierte JSON-Dateien sind ebenfalls zeilenorientiert und bieten keine spaltenorientierte Optimierung. RecordIO-Dateien sind ein binäres Format, das hauptsächlich für maschinelles Lernen verwendet wird und keine nativen Vorteile für die Athena-Abfrageleistung bietet.