데이터 웨어하우스는 PII(개인 식별 정보)를 포함하는 파트너 데이터를 수집해야 하지만, PII가 아닌 데이터만 저장해야 합니다. PII를 보존하지 않고 데이터를 처리하고 저장하는 방법은 무엇입니까?

이 솔루션은 PII를 저장하지 않고 처리해야 하는 요구 사항을 충족합니다. Dataflow는 스트리밍 또는 일괄 데이터 처리에 적합하며, Cloud DLP는 데이터가 BigQuery에 저장되기 전에 PII를 식별하고 익명화하거나 제거하는 데 효과적입니다. 두 번째 옵션은 PII를 Cloud Storage에 저장하므로 요구 사항을 위반합니다. 세 번째 옵션은 파트너에게 Bucket Lock을 요청하는 등 불필요한 복잡성을 추가하며, PII가 Cloud Storage에 저장될 위험이 있습니다. 네 번째 옵션은 파트너에게 BigQuery로 직접 가져오도록 요청하여 PII가 포함된 원본 데이터가 BigQuery에 저장될 수 있으므로 위험합니다. 또한 PII가 포함된 열을 건너뛰는 것은 데이터 무결성을 손상시킬 수 있습니다.