Dane raportowania przesyłasz strumieniowo do BigQuery, używając tabel przejściowych (staging) i produkcyjnych (production). Aby utrzymać jeden główny zestaw danych bez wpływu na pozyskiwanie danych ani raportowanie, w jaki sposób należy przenieść dane przejściowe do produkcji?

Prawidłowa odpowiedź zakłada przeniesienie danych z tabeli przejściowej do produkcyjnej, a następnie usunięcie zawartości tabeli przejściowej. Takie podejście zapewnia, że tabela produkcyjna zawiera zawsze aktualny, kompletny zestaw danych, bez zakłócania bieżącego pozyskiwania danych do tabeli przejściowej ani raportowania z tabeli produkcyjnej. Regularne czyszczenie tabeli przejściowej (np. co trzy godziny) zapobiega jej nadmiernemu rozrostowi i utrzymuje wydajność. Opcje z trybem "append-only" dla tabeli przejściowej i aktualizacją produkcji tylko zmianami są mniej efektywne, ponieważ wymagają złożonej logiki śledzenia zmian i mogą prowadzić do niespójności danych, jeśli nie zostaną prawidłowo zaimplementowane. Częstotliwość czyszczenia (co trzy godziny vs. co trzydzieści minut) zależy od wymagań biznesowych dotyczących świeżości danych i obciążenia systemu, ale trzy godziny to rozsądny interwał dla wielu zastosowań.