Ogni giorno carichi in batch centinaia di migliaia di post di social media, li elabori con Cloud Natural Language per estrarre argomenti e sentiment, memorizzi i post grezzi per l'archiviazione/rielaborazione e crei dashboard per utenti interni ed esterni. Come dovresti archiviare i dati grezzi ed estratti al minor costo e con il minor numero di passaggi?

La soluzione più efficiente e conveniente è archiviare i post grezzi dei social media in Cloud Storage e i dati estratti in BigQuery. Cloud Storage offre un'archiviazione a basso costo e altamente scalabile per i dati grezzi, che possono essere utilizzati per l'archiviazione a lungo termine e per future rielaborazioni. BigQuery è ottimizzato per l'analisi di grandi volumi di dati strutturati, rendendolo ideale per i dati estratti e per la creazione di dashboard. Archiviare tutto in BigQuery sarebbe costoso per i dati grezzi non strutturati. Cloud SQL non è adatto per volumi così elevati di dati non strutturati e per l'analisi su larga scala. Inviare i post direttamente all'API dalla sorgente non risolve il problema dell'archiviazione dei dati grezzi per l'archiviazione e la rielaborazione.