Twoje zasoby danych znajdują się w BigQuery, Pub/Sub i PostgreSQL na Compute Engine. Potrzebujesz lepszej wykrywalności danych przy minimalnym wysiłku deweloperskim/konfiguracyjnym. Jaką strategię katalogowania wybierzesz?

Poprawna odpowiedź to użycie Data Catalog do automatycznego katalogowania zbiorów danych BigQuery i tematów Pub/Sub, a następnie użycie niestandardowych konektorów do ręcznego katalogowania tabel PostgreSQL. Data Catalog natywnie integruje się z BigQuery i Pub/Sub, automatycznie wykrywając i katalogując ich zasoby, co minimalizuje wysiłek. PostgreSQL na Compute Engine nie jest natywnie obsługiwany przez Data Catalog, dlatego wymaga niestandardowego rozwiązania, takiego jak konektory, do integracji. Opcje sugerujące ręczne katalogowanie BigQuery lub Pub/Sub za pomocą API są mniej efektywne, ponieważ automatyczne katalogowanie jest dostępne. Opcja ręcznego katalogowania wszystkiego za pomocą niestandardowych konektorów jest zbyt pracochłonna i ignoruje wbudowane możliwości Data Catalog.