데이터 엔지니어는 Amazon DynamoDB, Amazon RDS, Amazon Redshift 및 Amazon S3에 저장된 데이터를 조인하는 일회성 분석을 수행해야 합니다. 단일 분석 작업을 위해 이러한 데이터 소스를 조인하는 데 가장 비용 효율적인 접근 방식은 무엇입니까?

Amazon Athena Federated Query는 다양한 데이터 소스(DynamoDB, RDS, Redshift, S3 포함)에 걸쳐 직접 쿼리를 실행하여 데이터를 조인할 수 있는 가장 비용 효율적인 방법입니다. 데이터 이동 없이 제자리에서 쿼리하므로 추가 스토리지 비용이나 ETL 파이프라인 구축 비용이 발생하지 않습니다. 다른 옵션들은 다음과 같은 이유로 적합하지 않습니다. Amazon EMR은 일회성 분석을 위해 클러스터를 프로비저닝하고 관리하는 데 오버헤드가 크고 비용이 많이 들 수 있습니다. 데이터를 S3로 복사하는 것은 데이터 이동 및 스토리지 비용을 발생시키고, 데이터가 최신 상태로 유지되지 않을 수 있습니다. Redshift Spectrum은 Redshift와 S3 데이터 조인에 효과적이지만, DynamoDB나 RDS와 같은 다른 소스에는 직접 연결되지 않으므로 추가적인 데이터 이동이 필요합니다.