Você aluga equipamentos de construção que emitem milhares de eventos de sensor por hora por dispositivo. Você precisa de armazenamento e recuperação atômicos e consistentes no tempo por sinal. O que você deve fazer?

A ingestão de dados de sensor no Bigtable com a chave de linha projetada usando o timestamp do evento é a melhor opção. O Bigtable é um banco de dados NoSQL de colunas largas, ideal para grandes volumes de dados de séries temporais, como eventos de sensores. Ele oferece consistência atômica e é altamente escalável para lidar com milhares de eventos por hora por dispositivo. Usar o timestamp na chave de linha otimiza as consultas baseadas em tempo. Gravar em arquivos no Cloud Storage é inadequado para recuperação atômica e consistente no tempo por sinal, pois o Cloud Storage é um armazenamento de objetos e não um banco de dados transacional. Criar um arquivo Filestore por dispositivo e anexar registros não oferece a consistência e o desempenho de consulta necessários para este caso de uso. Ingerir dados no Cloud SQL não é a melhor opção para volumes tão altos de dados de séries temporais, pois bancos de dados relacionais podem ter dificuldades de escalabilidade e desempenho para esse tipo de carga de trabalho, mesmo com réplicas de leitura.