El preprocesamiento de Dataflow lee muchos logs de BigQuery; el rendimiento es deficiente y los datos crecen rápidamente. ¿Qué cambio mejora el rendimiento de lectura?

La lectura .fromQuery permite seleccionar solo los campos específicos necesarios, lo que reduce la cantidad de datos leídos de BigQuery y, por lo tanto, mejora significativamente el rendimiento, especialmente con grandes volúmenes de datos. Al especificar explícitamente el objeto BigQuery TableReference, no se optimiza la cantidad de datos leídos. Usar las clases BigQuery TableSchema y TableFieldSchema es para definir el esquema, no para optimizar la lectura. Aplicar una transformación que devuelva objetos TableRow es una forma de representar los datos, pero no aborda la eficiencia de la lectura inicial de BigQuery.