Cloud Storage에 5TB AVRO 파일이 있습니다. 분석가는 SQL만 알고 있으며, 비용 효율적으로 최대한 빨리 액세스해야 합니다. 어떻게 해야 할까요?

정답은 Cloud Storage AVRO 파일을 참조하는 BigQuery 외부 테이블을 생성하고 해당 외부 테이블에 대해 SQL 쿼리를 실행하는 것입니다. BigQuery 외부 테이블은 Cloud Storage에 저장된 데이터를 이동하거나 변환할 필요 없이 직접 쿼리할 수 있게 해줍니다. 이는 5TB AVRO 파일에 대해 가장 비용 효율적이고 빠른 접근 방식입니다. 오답 설명: 데이터를 Cloud Datastore에 로드하는 것은 NoSQL 데이터베이스이므로 SQL 쿼리를 직접 실행할 수 없으며, 대규모 분석 워크로드에는 적합하지 않습니다. BigQuery 테이블을 생성하고 데이터를 로드한 다음 삭제하는 것은 가능하지만, 외부 테이블을 사용하는 것보다 데이터 로드 및 삭제에 시간이 더 많이 소요되고 비용이 발생할 수 있습니다. Hadoop 클러스터를 생성하는 것은 복잡하고 관리 오버헤드가 크며, BigQuery 외부 테이블보다 훨씬 느리고 비용이 많이 듭니다.