Ontwerp een schaalbare, ontkoppelde pipeline om jobs van producers (job generators) naar consumers (job runners) te leveren, die het mogelijk maakt om nieuwe applicaties toe te voegen zonder de bestaande prestaties te verminderen. Welke aanpak moet u gebruiken?

Cloud Pub/Sub is de ideale keuze voor een schaalbare, ontkoppelde pipeline. Het is een asynchrone berichtenservice die hoge doorvoer en lage latentie biedt. Producenten publiceren berichten (jobs) naar een topic, en consumenten (job runners) abonneren zich op dit topic om de berichten te ontvangen en te verwerken. Dit ontkoppelt producenten en consumenten volledig, waardoor nieuwe applicaties eenvoudig kunnen worden toegevoegd zonder de bestaande prestaties te beïnvloeden. Een API op App Engine zou schaalbaar kunnen zijn, maar vereist actieve polling door consumenten, wat minder efficiënt is en de ontkoppeling vermindert. Cloud SQL en Cloud Spanner zijn relationele databases; hoewel ze schaalbaar zijn, zijn ze niet geoptimaliseerd voor asynchrone berichtuitwisseling en zouden ze complexere logica vereisen voor het beheren van de jobwachtrij en de verwerking.