Una pipeline Cloud Dataflow riceverà dati da 50.000 installazioni. Per consentire a Dataflow di scalare la capacità di calcolo in base alle necessità, quale configurazione della pipeline dovresti modificare?

Il numero massimo di worker (maxNumWorkers) è la configurazione chiave da modificare per consentire a Dataflow di scalare la capacità di calcolo in base alle necessità. Impostando un limite superiore adeguato, si permette a Dataflow di aumentare o diminuire automaticamente il numero di worker in base al carico di lavoro, garantendo che la pipeline possa gestire picchi di dati da 50.000 installazioni senza interruzioni o rallentamenti. La zona specifica la regione geografica in cui viene eseguita la pipeline, ma non influisce direttamente sulla scalabilità automatica dei worker. Il numero di worker (numWorkers) imposta un numero fisso di worker, disabilitando di fatto l'autoscaling. La dimensione del disco per worker influisce sulla capacità di archiviazione e I/O di ciascun worker, ma non sulla capacità di Dataflow di aggiungere o rimuovere worker in base al carico.