Você planeja criar um cluster Amazon EMR de longa duração com 1 nó mestre, 10 nós core e 20 nós de tarefa, e deseja usar Spot Instances para reduzir custos. Quais nós são apropriados para serem executados em Spot Instances?

Nós de tarefa (task nodes) são os mais adequados para usar Spot Instances. Eles processam dados, mas não armazenam dados persistentes nem gerenciam o cluster, tornando-os tolerantes a interrupções. Se um nó de tarefa for interrompido, o EMR pode redistribuir o trabalho para outros nós de tarefa ou core sem perda de dados ou interrupção significativa do cluster. Nós mestre (master nodes) gerenciam o cluster e armazenam metadados importantes; sua interrupção causaria a falha do cluster. Nós core (core nodes) armazenam dados no HDFS e também processam dados; a interrupção de um nó core pode levar à perda de dados ou à necessidade de reprocessamento, o que não é ideal para um cluster de longa duração. Portanto, usar Spot Instances para nós mestre ou core não é recomendado devido ao risco de interrupção e perda de dados/gerenciamento.