Visualisierungsabfragen in BigQuery verwenden äußere Joins und Analysefunktionen und können Daten verwenden, die bis zu 4 Stunden alt sind. Benutzer empfinden Abfragen als langsam. Verbessern Sie die Abfrageleistung und minimieren Sie gleichzeitig die Pipeline-Wartung. Was tun Sie?

Die korrekte Option nutzt materialisierte Ansichten, die für die Verbesserung der Abfrageleistung bei häufig genutzten Abfragen konzipiert sind. allownonincrementaldefinition=true ermöglicht die Materialisierung komplexerer Abfragen (wie solche mit äußeren Joins und Analysefunktionen), die normalerweise keine inkrementelle Aktualisierung unterstützen würden. maxstaleness=4 Stunden stellt sicher, dass die Daten nicht älter als 4 Stunden sind, was der Anforderung entspricht und gleichzeitig die Aktualisierungsfrequenz optimiert. enablerefresh=true automatisiert die Aktualisierung. Das Verweisen des Visualisierungstools auf diese Ansichten leitet Abfragen an die vorab berechneten Ergebnisse um, was die Leistung erheblich verbessert und den Wartungsaufwand minimiert. Standardansichten verbessern die Leistung nicht, da sie bei jeder Abfrage neu berechnet werden. Das Exportieren nach Cloud Storage über eine Cloud Function ist aufwendiger in der Wartung und erfordert das Management von Dateiformaten und externen Tabellen. Materialisierte Ansichten mit inkrementellen Updates funktionieren nicht für Abfragen mit äußeren Joins und Analysefunktionen.