Je traint een BigQuery ML-model met SQL-preprocessing, maar je voert voorspellingen uit op ruwe, ongetransformeerde invoer. Hoe moet je training en voorspelling structureren om data skew tijdens de voorspelling te voorkomen?

De TRANSFORM-clausule in BigQuery ML is specifiek ontworpen om preprocessing-logica te kapselen binnen het model zelf. Wanneer je deze clausule gebruikt tijdens het trainen, past BigQuery ML automatisch dezelfde transformaties toe op nieuwe, onbewerkte invoergegevens tijdens de voorspelling. Dit voorkomt data skew (ook wel training-serving skew genoemd), omdat de transformaties die tijdens de training zijn geleerd, consistent worden toegepast tijdens de voorspelling. De andere opties vereisen handmatige of aparte preprocessing-stappen voor voorspelling, wat kan leiden tot inconsistenties en data skew als de transformaties niet exact overeenkomen met die van de training.