U moet 10 TB aan gevoelige patiëntendossiers veilig en snel vanuit een relationele database naar BigQuery verplaatsen. Welke overdrachtsaanpak voldoet aan de beveiligings- en tijdvereisten?

De Transfer Appliance is de meest geschikte oplossing voor het veilig en snel overzetten van 10 TB aan gevoelige gegevens. Het biedt een fysieke, offline overdrachtsmethode die de beveiliging van patiëntendossiers garandeert en tegelijkertijd de overdrachtstijd minimaliseert, vooral bij grote datasets waar netwerkoverdracht onpraktisch of te traag zou zijn. Avro is een efficiënt binair formaat dat schema-evolutie ondersteunt, ideaal voor gestructureerde gegevens zoals patiëntendossiers. De BigQuery-web-UI kan Avro-bestanden direct laden. De optie met gsutil is mogelijk te traag voor 10 TB via het netwerk. Het gebruik van een openbare URL voor gevoelige gegevens is een ernstig beveiligingsrisico en onacceptabel voor patiëntendossiers. CSV is minder efficiënt dan Avro voor grote datasets en mist schema-informatie.