MLエンジニアが、データ損失が許されない大規模なバッチ処理にAmazon EMRクラスターを使用します。データ損失がないことを保証しながら、最も費用対効果の高いインスタンス購入戦略はどれですか？

この戦略は、データ損失を回避しつつコスト効率を最大化します。プライマリノードとコアノードは、クラスターの安定性とデータの永続性を保証するため、中断のないオンデマンドインスタンスで実行することが不可欠です。コアノードはHDFSデータを保存するため、中断されるとデータ損失のリスクがあります。一方、タスクノードは計算タスクのみを実行し、HDFSデータを保存しないため、スポットインスタンスの中断が発生してもデータ損失には繋がりません。タスクノードをスポットインスタンスにすることで、大幅なコスト削減が期待できます。他の選択肢は、データ損失のリスクを伴うか、コスト効率が低くなります。例えば、すべてのノードをスポットインスタンスにすると、コアノードの中断によりデータ損失が発生する可能性があります。