Cloud Spanner와 Cloud Bigtable의 사용자별 데이터를 임시로 조인해야 합니다. Spanner 백업은 Cloud Storage로 내보내집니다. 가능한 한 효율적으로 이 작업을 수행해야 합니다. 어떻게 해야 할까요?

이 시나리오에서는 Cloud Spanner 백업이 Cloud Storage에 저장되어 있고 Cloud Bigtable의 데이터와 조인해야 합니다. BigQuery 외부 테이블은 Cloud Storage의 Spanner 내보내기 파일과 Bigtable 인스턴스에 직접 연결하여 데이터를 BigQuery로 로드하지 않고도 쿼리할 수 있도록 합니다. 그런 다음 BigQuery에서 두 외부 테이블을 조인하고 사용자 필터를 적용하여 효율적으로 데이터를 결합할 수 있습니다. Dataflow나 Dataproc은 복잡한 파이프라인을 구축해야 하므로 이 경우 BigQuery 외부 테이블보다 효율성이 떨어집니다.