Dataflow akış işi, tam olarak bir kez teslimat garantisi olmayan bir kaynaktan okuma yapıyor, mesajları dönüştürüyor ve BigQuery'ye yazıyor. Alım hızı yaklaşık 1,5 GB/sn bekleniyor. BigQuery'ye tam olarak bir kez teslimatı nasıl sağlarsınız?

BigQuery Storage Write API, tam olarak bir kez (exactly-once) anlambilimini destekleyerek, Dataflow'dan BigQuery'ye veri yazarken veri tutarlılığını garanti eder. Bu API, özellikle yüksek hacimli veri alımı senaryoları için tasarlanmıştır ve mesajların yinelenmesini veya kaybolmasını önler. Hedef BigQuery tablosunun çok bölgeli olması, yüksek erişilebilirlik ve hata toleransı sağlar, böylece veri alımının kesintisiz ve güvenilir bir şekilde devam etmesi garanti edilir. BigQuery Streaming API ise tam olarak bir kez anlambilimini doğal olarak desteklemez ve yinelenen kayıtlar oluşturabilir. Bölgesel bir BigQuery tablosu kullanmak, çok bölgeli bir tabloya göre daha düşük hata toleransı sunar.