POSIX 온프레미스 소스에서 Google Cloud로 매주 15TB를 500Mbps 인터넷 연결을 통해 안정적으로 전송해야 하며, Google의 모범 사례를 따라야 합니다. 무엇을 배포해야 할까요?

주간 15TB의 POSIX 온프레미스 데이터를 500Mbps 연결을 통해 Google Cloud로 안정적으로 전송하려면 Storage Transfer Service for on-premises data가 가장 적합합니다. 이 서비스는 대용량 데이터를 효율적으로 전송하도록 설계되었으며, 대역폭 제한 환경에서도 재시도, 병렬 처리, 데이터 무결성 검증 등 안정적인 전송 기능을 제공합니다. 데이터 센터에 직접 설치하여 온프레미스 파일 시스템에 접근할 수 있습니다. gsutil은 단일 명령으로 대용량 데이터를 전송할 수 있지만, 15TB와 같은 대규모 주간 전송에는 Storage Transfer Service가 제공하는 관리형 서비스의 안정성과 효율성이 더 유리합니다. Transfer Appliance는 오프라인 전송 솔루션으로, 온라인 전송이 가능한 상황에서는 불필요하며, 데이터를 GKE 클러스터로 마이그레이션하는 것은 추가적인 복잡성을 야기합니다. Google Cloud VM에 Storage Transfer Service를 설치하는 것은 온프레미스 데이터에 직접 접근하기 어렵게 만들어 비효율적입니다.