Sie planen, einen langlebigen Amazon EMR-Cluster mit 1 Master-Knoten, 10 Core-Knoten und 20 Task-Knoten zu erstellen, und möchten Spot Instances verwenden, um Kosten zu senken. Welche Knoten eignen sich für den Betrieb auf Spot Instances?

Task-Knoten sind ideal für Spot Instances, da sie keine persistenten Daten speichern und ihre Unterbrechung den Clusterbetrieb nicht kritisch beeinträchtigt. Sie können dynamisch hinzugefügt oder entfernt werden, ohne den Fortschritt der Spark- oder Hadoop-Jobs zu gefährden, da die Core-Knoten die Daten und den Zustand verwalten. Master-Knoten sollten nicht auf Spot Instances laufen, da ihre Unterbrechung zum Verlust des Cluster-Managements führt. Core-Knoten speichern Daten im HDFS; ihre Unterbrechung kann zu Datenverlust oder erheblichen Verzögerungen bei der Wiederherstellung führen.