관계형 데이터베이스에서 BigQuery로 10TB의 민감한 환자 기록을 안전하고 신속하게 이동해야 합니다. 어떤 전송 방식이 보안 및 시간 요구 사항을 충족할까요?

10TB의 민감한 데이터를 안전하고 신속하게 전송해야 하므로 Transfer Appliance가 가장 적합한 옵션입니다. Transfer Appliance는 대규모 데이터를 오프라인으로 전송하여 네트워크 대역폭 제약을 피하고, 물리적 보안 조치를 통해 데이터 전송 중 보안을 강화합니다. 데이터베이스에서 Avro 파일로 내보내는 것은 스키마를 유지하고 효율적인 로딩을 가능하게 합니다. 다른 옵션들은 다음과 같은 이유로 적합하지 않습니다. gsutil을 사용한 직접 업로드는 10TB의 데이터에 대해 네트워크 대역폭 제약으로 인해 시간이 오래 걸릴 수 있습니다. CSV 파일은 스키마 유지가 어렵고 Avro보다 효율성이 떨어질 수 있으며, 공개 URL을 사용하는 것은 민감한 데이터에 대한 보안 위험을 초래합니다. Avro 파일에 대한 공개 URL을 사용하는 것 또한 민감한 데이터에 대한 보안 위험을 초래합니다.