Sie haben ORC-Dateien in einen Cloud Storage-Bucket migriert und möchten Hive auf einem Dataproc-Cluster verwenden, optional mit Datenreplikation in HDFS zur Leistungssteigerung. Welche zwei Methoden ermöglichen Ihnen die Verwendung von Hive auf Dataproc? (Wählen Sie zwei.)
Wählen Sie eine Antwort
Tippen Sie auf eine Option, um Ihre Antwort zu überprüfen.
Richtige Antwort: Führen Sie gsutil aus, um alle ORC-Dateien vom Cloud Storage-Bucket auf den Master-Knoten zu übertragen, verwenden Sie dann Hadoop-Dienstprogramme, um sie in HDFS zu kopieren und die Hive-Tabellen von HDFS einzubinden., Verwenden Sie den Cloud Storage-Konnektor für Hadoop, um die ORC-Dateien als externe Hive-Tabellen verfügbar zu machen, und replizieren Sie diese externen Tabellen dann in native Hive-Tabellen..
Warum dies die Antwort ist
Die erste korrekte Methode besteht darin, die ORC-Dateien manuell von Cloud Storage auf den Dataproc-Master-Knoten zu kopieren und sie dann mit Hadoop-Dienstprogrammen (z.B. hadoop fs -put) in HDFS zu verschieben. Anschließend können Hive-Tabellen direkt auf diese HDFS-Pfade verweisen. Dies ermöglicht die Datenreplikation in HDFS zur Leistungssteigerung, wie in der Frage erwähnt. Die zweite korrekte Methode nutzt den Cloud Storage-Konnektor für Hadoop. Dieser Konnektor ermöglicht es Hive, direkt auf Dateien in Cloud Storage zuzugreifen, indem externe Tabellen erstellt werden, die auf die Cloud Storage-Pfade verweisen. Um die Leistung zu optimieren, können diese externen Tabellen dann in native Hive-Tabellen repliziert werden, wodurch die Daten in HDFS kopiert werden. Die Option, gsutil zu verwenden, um Dateien direkt in HDFS zu übertragen, ist falsch, da gsutil nicht direkt mit HDFS interagiert. Die Übertragung auf einen beliebigen Dataproc-Knoten ohne spezifische HDFS-Integration ist ebenfalls unzureichend. Das Laden der Dateien in BigQuery ist eine alternative Speicherlösung, aber nicht die direkte Methode, um Hive auf Dataproc mit den vorhandenen ORC-Dateien zu nutzen und optional in HDFS zu replizieren.
Bestehen Sie Ihre Prüfung – ohne endlose Antwortsuche
Erhalten Sie jede verifizierte Frage und Erklärung für diese Prüfung an einem Ort und sparen Sie Stunden der Vorbereitung. Über 1.000 Zertifizierungen · Über 20 Sprachen · Kostenloser Start.
Bestehen Sie Ihre Prüfung schneller → Keine Karte erforderlich