Data scientists hebben een low-code manier nodig om bestanden in Cloud Storage te verkennen, op te schonen en te valideren. Welke oplossing biedt die mogelijkheid?

De juiste oplossing is om het team toegang te geven tot Dataprep. Dataprep is een serverloze, visuele tool voor data-exploratie, -opschoning en -voorbereiding. Het biedt een low-code interface waarmee data scientists direct bestanden in Cloud Storage kunnen verkennen, transformeren en valideren zonder complexe code te schrijven. De andere opties zijn minder geschikt voor de gestelde eis van een "low-code manier": Dataflow vereist het schrijven van code (Java, Python, Go) voor pipelines, wat niet low-code is. Externe tabellen in BigQuery en SQL-transformaties vereisen weliswaar SQL, maar de initiële exploratie en opschoning van ongestructureerde of semi-gestructureerde data is minder intuïtief en visueel dan met Dataprep. Het laden van bestanden in BigQuery en vervolgens transformeren met SQL is een optie, maar Dataprep biedt een efficiëntere en visuelere workflow voor de exploratie, opschoning en validatie van ruwe data, vooral wanneer deze nog niet gestructureerd is voor BigQuery.