Devi individuare le tabelle BigQuery contenenti una colonna employee_ssn in oltre 1000 set di dati e molti progetti con il minimo sforzo. Cosa dovresti fare?

Cercare "employeessn" in Data Catalog è la soluzione più efficiente e con il minimo sforzo. Data Catalog è un servizio di gestione dei metadati completamente gestito che indicizza automaticamente le risorse dati, inclusi gli schemi delle tabelle BigQuery, in tutti i progetti e set di dati. Permette di cercare e scoprire rapidamente i dati basandosi su metadati, tag e nomi di colonne. Le altre opzioni richiedono uno sforzo di sviluppo e manutenzione significativi: Scrivere uno script shell o uno script che scorra i progetti e interroghi INFORMATIONSCHEMA.COLUMNS sarebbe complesso da gestire su larga scala e richiederebbe la gestione delle credenziali e delle autorizzazioni per ogni progetto. Creare un job Cloud Dataflow è una soluzione eccessiva e complessa per un semplice compito di scoperta di metadati, più adatta per trasformazioni di dati su larga scala.