Je beheert een Dataproc-cluster en hebt snellere voltooiing van taken nodig, terwijl je de kosten minimaliseert en lopend werk behoudt. Welke wijziging voer je door?

De juiste optie is het vergroten van de clustergrootte met preemptible worker nodes en het configureren van graceful decommissioning. Preemptible workers zijn aanzienlijk goedkoper dan standaard workers en zijn ideaal voor taken die tolerant zijn voor onderbrekingen, wat bijdraagt aan kostenminimalisatie. Graceful decommissioning zorgt ervoor dat lopende taken op een preemptible worker de tijd krijgen om af te ronden voordat de node wordt afgesloten, waardoor werk behouden blijft en de kans op taakfouten door onverwachte afsluitingen wordt verkleind. Het vergroten van de clustergrootte met meer niet-preemptible workers zou de kosten aanzienlijk verhogen zonder de flexibiliteit van preemptible VM's. Het geforceerd decommissineren van preemptible workers zou leiden tot verlies van lopend werk, wat in strijd is met de eis om werk te behouden. Het gebruik van Cloud Stackdriver om een script te activeren om werk te behouden is een complexere en minder directe oplossing dan de ingebouwde graceful decommissioning functionaliteit van Dataproc.