La tua organizzazione archivia i dati in GCS e AWS S3 nelle regioni degli Stati Uniti. Vuoi che gli utenti BigQuery interroghino dati aggiornati senza concedere l'accesso diretto ai bucket di archiviazione. Cosa dovresti fare?

L'opzione corretta sfrutta BigQuery Omni per interrogare i dati in AWS S3 direttamente, senza spostarli, e BigLake per creare tabelle sui dati sia in Cloud Storage che in S3. BigLake offre un controllo granulare degli accessi e una gestione unificata dei metadati, consentendo agli utenti BigQuery di interrogare dati aggiornati senza accesso diretto ai bucket sottostanti. Le opzioni che propongono tabelle esterne sono meno ideali perché le tabelle esterne non offrono lo stesso livello di gestione dei metadati e di controllo degli accessi granulare di BigLake. Le opzioni che utilizzano Storage Transfer Service implicano lo spostamento dei dati da AWS S3 a Cloud Storage, il che introduce latenza, costi di trasferimento e non soddisfa il requisito di interrogare dati aggiornati senza spostamenti non necessari, specialmente se i dati in S3 vengono aggiornati frequentemente.