차량은 신뢰할 수 없는 셀룰러 링크를 통해 파일을 전송하며, 현재 FTP는 실패 시 전송을 다시 시작합니다. 안정성을 개선하고 ETL 수집을 위한 전송 시간을 최소화하려면 어떻게 해야 할까요?

정답은 Google API를 통해 HTTPS로 US, EU, Asia의 Regional Cloud Storage 버킷에 파일을 직접 업로드한 다음, 각 Regional 버킷에서 데이터를 검색하도록 ETL 프로세스를 실행하는 것입니다. 신뢰할 수 없는 셀룰러 링크에서는 FTP 대신 HTTPS를 사용하는 것이 더 안정적입니다. Google Cloud Storage는 재시도 및 재개를 기본적으로 지원하여 전송 안정성을 높입니다. Regional 버킷은 데이터가 생성되는 위치에 가까이 저장되어 지연 시간을 줄이고 전송 속도를 최적화합니다. Multi-Regional 버킷은 지리적 중복성을 제공하지만, 이 시나리오에서는 데이터가 생성되는 위치에 가까운 저장소가 전송 시간 최소화에 더 중요합니다. GKE 클러스터에 FTP 서버를 배포하는 것은 불필요한 복잡성을 추가하며, Cloud Storage의 직접 업로드 기능이 더 효율적입니다.