Хранилище данных должно получать партнерские данные, содержащие PII, но хранить только данные, не содержащие PII. Как обрабатывать и хранить данные, не сохраняя PII?

Правильный ответ — использование Dataflow с Cloud DLP. Dataflow — это управляемый сервис для выполнения конвейеров обработки данных, который идеально подходит для приема и преобразования данных в потоковом или пакетном режиме. Интеграция Cloud DLP позволяет обнаруживать и деидентифицировать конфиденциальные данные (PII) непосредственно в процессе обработки, до их сохранения. Затем очищенные данные безопасно записываются в BigQuery, который является масштабируемым и экономичным хранилищем данных. Остальные варианты менее оптимальны: Хранение PII в Cloud Storage, даже с политикой хранения, все равно означает хранение конфиденциальных данных, что противоречит требованию не хранить PII. Использование Bucket Lock не предотвращает хранение PII, а лишь обеспечивает неизменяемость объектов. Хотя DLP используется, хранение PII в Cloud Storage до обработки все еще является риском. Просить партнеров импортировать данные напрямую в BigQuery и пропускать столбцы с PII полагается на ручное определение PII, что менее надежно, чем автоматическое обнаружение DLP, и может привести к утечкам.