Je wilt nachtelijke taken veilig automatiseren die niet-openbare batchbestanden lezen uit Cloud Storage, een Spark Scala-taak uitvoeren op Dataproc en de resultaten naar BigQuery schrijven. Hoe moet de workload veilig worden uitgevoerd?

De correcte aanpak is om de taak uit te voeren met een serviceaccount dat minimale, specifieke rechten heeft. Dit serviceaccount heeft alleen leesrechten nodig voor de Cloud Storage-bucket (om de batchbestanden te lezen) en schrijfrechten voor BigQuery (om de resultaten op te slaan). Dit volgt het principe van minimale privileges, wat essentieel is voor beveiliging. Het beveiligen van de Cloud Storage-bucket voor alleen jouw gebruikersaccount is onpraktisch en onveilig voor geautomatiseerde taken, omdat je dan je persoonlijke accountrechten zou moeten delen of gebruiken. Het verlenen van de Project Owner-rol aan een serviceaccount is een ernstig beveiligingsrisico, omdat dit veel te veel privileges geeft. Een gebruikersaccount met Project Viewer-rechten op het Dataproc-cluster is onvoldoende, omdat het geen rechten geeft om bestanden te lezen uit Cloud Storage of te schrijven naar BigQuery.