Какой рекомендуемый способ удаления PII (персонально идентифицируемой информации) или данных платежных карт из логов службы поддержки клиентов перед первоначальным хранением в Cloud Bigtable?

Cloud Data Loss Prevention (DLP) API — это рекомендуемый способ деидентификации конфиденциальных данных, таких как PII и данные платежных карт. Он предлагает мощные возможности обнаружения и трансформации для удаления или маскирования чувствительной информации, обеспечивая соответствие нормативным требованиям. Хэширование данных с использованием SHA256 не является деидентификацией, так как хэш все еще может быть связан с исходными данными, если хэш-функция известна или если используются радужные таблицы. Шифрование данных не удаляет их из логов, а лишь скрывает, что может быть недостаточно для некоторых требований соответствия. Использование регулярных выражений менее надежно, так как они могут пропустить сложные паттерны или быть неэффективными при обработке больших объемов данных.