Bigtable stocke les données de commande client avec une politique de GC (Garbage Collection) de suppression après 30 jours et un nombre maximal de versions égal à 1, mais les analystes voient parfois des données de plus de 30 jours. Minimisez les coûts/la surcharge et empêchez les lecteurs de voir des données de plus de 30 jours. Que devez-vous faire ?

La politique de GC de Bigtable s'applique aux données au niveau du stockage, mais les données peuvent rester visibles si elles ne sont pas écrasées ou explicitement supprimées. Le fait que les analystes voient des données de plus de 30 jours indique que la politique de GC n'a pas encore supprimé ces données du stockage, probablement parce qu'elles n'ont pas été écrasées par de nouvelles versions. L'utilisation d'un filtre de plage de timestamps dans la requête est la solution la plus efficace car elle empêche les lecteurs de voir les données obsolètes sans modifier la configuration de stockage ni introduire de surcharge opérationnelle. Bigtable stocke les versions des cellules avec des timestamps, permettant aux requêtes de cibler des plages de temps spécifiques. Définir l'expiration à 29 jours (ou 30 jours) n'est pas garanti d'empêcher la visibilité des données de plus de 30 jours, car la suppression par GC est asynchrone et dépend de l'activité d'écriture. Planifier une tâche quotidienne pour supprimer les données est coûteux en termes de calcul et de surcharge opérationnelle. Définir le nombre de versions à 2 n'aide pas à masquer les données anciennes et augmente le stockage.