Necesitas datos meteorológicos para un modelo que utiliza solo los últimos 30 días. Para evitar almacenar datos innecesarios y minimizar costos, ¿cómo deberías diseñar la tabla de BigQuery?

La opción correcta aprovecha las características de partición y expiración de BigQuery para la gestión eficiente de datos. Al particionar por la fecha meteorológica (el campo relevante para el modelo) y establecer la expiración de la partición en 30 días, BigQuery elimina automáticamente las particiones antiguas, minimizando el almacenamiento y los costos sin intervención manual. Las opciones que implican eliminar filas mediante consultas programadas son menos eficientes y más costosas. Eliminar filas en BigQuery es una operación de escritura que reescribe la tabla, incurriendo en costos de procesamiento y almacenamiento. Particionar por tiempo de ingesta no es ideal porque el modelo necesita datos basados en la fecha meteorológica, no en cuándo se ingirieron.