Günlük terabaytlarca Google Analytics olay verisi BigQuery'ye aktarılıyor. Müşteri profili tabloları Cloud SQL for MySQL ve Cloud SQL for PostgreSQL'de bulunuyor. Pazarlama ekibinin günde 100-300 kez birleştirilmiş kampanyalar yürütmesi ve Cloud SQL örnekleri üzerindeki yükü en aza indirmesi gerekiyor. Ne uygulamanız gerekir?

Doğru cevap, Cloud SQL'deki müşteri profili tablolarını BigQuery'ye kopyalamak için Datastream akışları oluşturmaktır. Bu yaklaşım, pazarlama ekibinin birleşik kampanyaları doğrudan BigQuery'de çalıştırmasına olanak tanır, böylece Cloud SQL örnekleri üzerindeki yükü ortadan kaldırır ve BigQuery'nin analitik yeteneklerinden tam olarak yararlanılır. Datastream, değişiklikleri gerçek zamanlı olarak BigQuery'ye aktararak verilerin güncel kalmasını sağlar. Diğer seçenekler neden uygun değil: BigQuery federated queries kullanmak, her sorguda Cloud SQL örneklerine yük bindirir ve bu da günde 100-300 sorgu için kabul edilemez bir yük oluşturur. Dataproc Serverless üzerinde Apache Spark işi oluşturmak, ek altyapı yönetimi ve maliyet getirir ve doğrudan BigQuery'de birleştirme yapmak kadar verimli değildir. Trino ile Dataproc kümesi sağlamak da benzer şekilde ek karmaşıklık ve maliyet yaratır ve verileri BigQuery'ye taşımadan sorgulamak, Cloud SQL üzerindeki yük sorununu çözmez.