Les nœuds Dataproc ne peuvent pas accéder à Internet ; vous devez installer des dépendances de démarrage supplémentaires via une action d'initialisation existante. Comment fournissez-vous ces dépendances en toute sécurité ?

La bonne réponse est de copier toutes les dépendances dans un bucket Cloud Storage à l'intérieur de votre périmètre de sécurité VPC. Si les nœuds Dataproc ne peuvent pas accéder à Internet, la méthode la plus sécurisée et la plus efficace pour fournir des dépendances est de les stocker dans un bucket Cloud Storage accessible depuis votre réseau privé. Les actions d'initialisation peuvent ensuite les récupérer localement. Déployer le proxy Cloud SQL sur le maître Dataproc n'est pas pertinent car il est destiné à la connexion aux instances Cloud SQL, pas à la fourniture de dépendances générales. Créer un tunnel SSH pour donner au cluster Dataproc un accès Internet compromet la sécurité en contournant les restrictions d'accès à Internet. Utiliser Resource Manager pour attribuer le rôle Network User au compte de service Dataproc ne donne pas un accès direct aux dépendances stockées localement sans accès Internet.