Sie müssen 1 PB an Daten innerhalb weniger Stunden über eine sichere Verbindung gemäß den Best Practices von Google von On-Prem zu Google Cloud übertragen. Was tun Sie?

Für 1 PB Daten in wenigen Stunden ist eine hohe Bandbreite erforderlich. Cloud Interconnect bietet eine dedizierte, sichere Verbindung mit hoher Bandbreite zwischen Ihrem Rechenzentrum und Google Cloud, was für diese Datenmenge und Zeitvorgabe ideal ist. Der Storage Transfer Service ist für die effiziente Übertragung großer Datenmengen optimiert, einschließlich inkrementeller Übertragungen und Datenintegritätsprüfungen. Die Transfer Appliance ist für größere Datenmengen (bis zu 1 PB pro Appliance) geeignet, aber der manuelle Prozess des Verschlüsselns, Entschlüsselns und Verifizierens ist zeitaufwändig und fehleranfällig, was die "wenigen Stunden"-Anforderung nicht erfüllt. Cloud VPN bietet zwar eine sichere Verbindung, hat aber in der Regel nicht die Bandbreite für 1 PB in wenigen Stunden, und parallele gcloud compute scp-Jobs sind für diese Skalierung ineffizient. Das Aufteilen in 3-TB-Batches und die Verwendung von gsutil ist ebenfalls zu langsam und nicht für diese Größenordnung und Zeitvorgabe optimiert.