Diseñando un trabajo por lotes de Dataflow: desea mitigar fallas multizonales en el momento del envío del trabajo. ¿Qué debería hacer?

Especificar una región de worker usando el flag --region es la solución correcta porque Dataflow es un servicio regional. Al especificar una región, Dataflow distribuye automáticamente los workers en múltiples zonas dentro de esa región, proporcionando resiliencia contra fallas zonales sin intervención manual. Enviar pipelines duplicados en dos zonas diferentes usando el flag --zone es ineficiente y no es la forma en que Dataflow maneja la resiliencia zonal, ya que la plataforma ya lo hace a nivel regional. Establecer la ubicación de staging como un bucket regional de Cloud Storage ayuda con la disponibilidad de los archivos del pipeline, pero no mitiga las fallas de los workers. Crear un disparador de Eventarc para reenviar el trabajo es una solución reactiva y más compleja que no previene la falla inicial del envío debido a un problema zonal.