회사는 일정한 속도로 시장 데이터를 지속적으로 수집하여 저장합니다. 야간 집계 작업은 통계를 계산하는 데 약 4시간이 걸리며, 분석은 중요하지 않으므로 실패하면 다음 실행 시 재시도할 수 있습니다. 현재 시스템은 1년 예약 인스턴스 풀을 사용하여 데이터를 지속적으로 수집하고 연결된 EBS 볼륨에 저장합니다. 예약된 스크립트는 매일 밤 온디맨드 EC2 인스턴스를 시작하여 집계를 실행하고, 수집 서버에서 NFS를 통해 데이터에 액세스하며, 작업이 완료되면 인스턴스를 종료합니다. 예약 인스턴스 예약이 만료됩니다. 회사는 가장 비용 효율적인 옵션을 원합니다. 설계자는 어떤 솔루션을 권장해야 할까요?

이 솔루션은 비용 효율성과 확장성을 모두 제공합니다. Amazon Kinesis Data Firehose를 사용하여 데이터를 Amazon S3로 직접 전송하면 데이터 수집 인프라를 간소화하고 관리 오버헤드를 줄일 수 있습니다. S3는 저렴하고 내구성이 뛰어난 스토리지입니다. 야간 집계 작업에 AWS Batch와 Spot 인스턴스를 사용하는 것은 분석이 중요하지 않고 재시도할 수 있다는 조건에 완벽하게 부합합니다. Spot 인스턴스는 온디맨드 가격보다 훨씬 저렴하여 비용을 크게 절감할 수 있으며, AWS Batch는 작업 관리 및 재시도를 처리하여 안정성을 보장합니다. 다른 옵션들은 다음과 같은 이유로 최적이 아닙니다. 첫 번째 오답: 온디맨드 EC2 인스턴스 플릿을 사용하는 것은 Spot 인스턴스보다 비쌉니다. 두 번째 오답: 3년 예약 인스턴스는 초기 비용이 높고 유연성이 떨어지며, 수집 계층에 Network Load Balancer를 사용하는 것이 항상 필요한 것은 아닙니다. 세 번째 오답: Amazon Redshift는 실시간 분석 및 복잡한 쿼리에 적합하지만, 단순히 일일 통계를 생성하는 데에는 비용이 많이 들 수 있으며, Lambda 함수의 제한 시간 제약으로 인해 4시간이 걸리는 집계 작업에는 적합하지 않을 수 있습니다.