Masz 20 TB plików tekstowych CSV, a wielu użytkowników będzie uruchamiać zapytania agregujące przy użyciu różnych silników; która usługa przechowywania danych i schemat minimalizują koszt zapytań?

Przechowywanie danych w Cloud Storage i udostępnianie ich jako stałe tabele zewnętrzne w BigQuery to najbardziej opłacalne rozwiązanie. Cloud Storage oferuje bardzo niskie koszty przechowywania dużych ilości danych. BigQuery, jako bezserwerowa hurtownia danych, jest zoptymalizowane pod kątem szybkich zapytań agregacyjnych na dużych zbiorach danych, a jego model rozliczeniowy oparty na ilości skanowanych danych jest ekonomiczny, gdy dane są przechowywane w efektywnym formacie (np. Parquet, ORC) i partycjonowane. Tabele zewnętrzne pozwalają na wykonywanie zapytań bezpośrednio na danych w Cloud Storage bez konieczności ich importowania, co dodatkowo obniża koszty i złożoność. Cloud Bigtable jest bazą danych NoSQL o wysokiej przepustowości i niskich opóźnieniach, ale jest znacznie droższy niż Cloud Storage i nie jest optymalny do zapytań agregacyjnych wielu użytkowników. Użycie powłoki HBase na instancji Compute Engine wiązałoby się z zarządzaniem infrastrukturą i wyższymi kosztami operacyjnymi. Tabele tymczasowe w BigQuery nie są odpowiednie do trwałych danych, do których wielu użytkowników będzie wielokrotnie wykonywać zapytania.