Amazon EMR 클러스터(EMRFS 사용)는 매일 오전 1시에 시작하여 약 6시간이 소요되는 중요한 배치 작업을 실행합니다. 클러스터는 현재 프라이머리, 코어 및 태스크 노드에 온디맨드 인스턴스를 사용하며, 완료 시간이 급박하지는 않습니다. 컴퓨팅 비용을 줄이기 위해 아키텍처를 검토해야 합니다. 솔루션스 아키텍트가 권장해야 하는 변경 사항은 무엇입니까?

정답은 EMR 클러스터의 안정성과 비용 효율성을 모두 고려합니다. 프라이머리 및 코어 노드는 작업의 핵심 구성 요소이므로 온디맨드 인스턴스를 사용하여 안정적인 실행을 보장합니다. 태스크 노드는 중단에 더 탄력적이므로 비용 절감을 위해 스팟 인스턴스를 사용합니다. 작업 완료 후 태스크 노드만 종료하여 불필요한 비용을 줄이고, Compute Savings Plans는 온디맨드 인스턴스 비용을 추가로 절감합니다. 다른 옵션들은 다음과 같은 이유로 적절하지 않습니다: 모든 노드를 스팟 인스턴스로 실행하는 것은 프라이머리 및 코어 노드의 중단 위험을 높여 작업 실패 가능성을 증가시킵니다. 작업 완료 후 전체 클러스터를 종료하는 것은 다음 작업 시작 시 클러스터 프로비저닝 시간을 다시 소요하게 하여 비효율적입니다. 모든 노드를 온디맨드 인스턴스로 유지하는 것은 스팟 인스턴스를 활용한 비용 절감 기회를 놓칩니다.