Scanners portáteis começaram a enviar PII para tópicos Kafka; você deve impedir rapidamente que PII chegue à análise usando serviços de nuvem escaláveis e gerenciados. Qual solução você implementa?

A solução correta é usar uma Cloud Function com a API Cloud DLP. A Cloud Function pode ser acionada por novas mensagens nos tópicos Kafka (via Pub/Sub), permitindo uma inspeção em tempo real. A Cloud DLP é um serviço gerenciado e escalável, ideal para identificar, classificar e redigir PII. Os níveis de marcação e confiança permitem uma política de quarentena flexível, garantindo que a PII seja tratada antes de chegar à análise. Criar uma visualização autorizada no BigQuery não impede que a PII chegue ao BigQuery; apenas restringe o acesso após o fato. Instalar uma ferramenta de terceiros em VMs do Compute Engine adiciona complexidade de gerenciamento e não é tão escalável ou gerenciada quanto o Cloud DLP. Usar o Cloud Logging para analisar dados é reativo e não impede a PII de entrar no pipeline; é mais para auditoria e monitoramento.