Fahrzeuge senden Dateien über unzuverlässige Mobilfunkverbindungen; der aktuelle FTP-Dienst startet Übertragungen bei Fehlern neu. Was sollten Sie tun, um die Zuverlässigkeit zu verbessern und die Übertragungszeit für die ETL-Aufnahme zu minimieren?

Die direkte Nutzung der Google APIs über HTTPS für den Upload in regionale Cloud Storage-Buckets ist die beste Lösung. Dies minimiert die Übertragungszeit, da die Daten direkt in die nächstgelegene Region hochgeladen werden, und verbessert die Zuverlässigkeit, da die Google APIs für den Umgang mit unzuverlässigen Netzwerken optimiert sind und keine FTP-Server gewartet werden müssen. Der ETL-Prozess kann dann die Daten aus den jeweiligen regionalen Buckets abrufen. Die Option mit einem einzelnen GKE-Cluster und Multi-Regional Cloud Storage ist weniger performant, da alle Uploads über einen zentralen Punkt laufen und die Daten möglicherweise über weite Strecken übertragen werden müssen. Mehrere GKE-Cluster mit FTP-Servern in verschiedenen Regionen erhöhen die Komplexität und die Wartungskosten, ohne die Zuverlässigkeit der Übertragung über unzuverlässige Mobilfunkverbindungen wesentlich zu verbessern, da FTP selbst nicht für solche Szenarien optimiert ist. Die Option mit Multi-Regional Cloud Storage-Buckets über Google APIs ist zwar zuverlässig, aber Regional Buckets sind für die Minimierung der Übertragungszeit bei geografisch verteilten Uploads effizienter, da die Daten näher an ihrem Ursprung gespeichert werden.