Vous devez migrer un cluster Hadoop de 30 nœuds vers le cloud, réutiliser les tâches Hadoop existantes, minimiser la gestion du cluster et faire en sorte que les données persistent au-delà de la durée de vie du cluster. Que devez-vous faire ?

L'option correcte est de créer un cluster Cloud Dataproc qui utilise le connecteur Google Cloud Storage. Cloud Dataproc est un service géré qui permet de réutiliser les tâches Hadoop existantes et minimise la gestion du cluster. L'utilisation du connecteur Google Cloud Storage (GCS) permet aux données de persister indépendamment de la durée de vie du cluster, car GCS est un stockage objet durable et hautement disponible. Les autres options sont moins optimales : Créer une tâche Google Cloud Dataflow nécessiterait de réécrire les tâches Hadoop existantes, ce qui n'est pas l'objectif. Créer un cluster Google Cloud Dataproc qui utilise des disques persistants pour HDFS lierait les données à la durée de vie du cluster et ne permettrait pas la persistance des données au-delà. Créer un cluster Hadoop sur Google Compute Engine avec des disques persistants ou des disques SSD locaux augmenterait la charge de gestion du cluster et ne garantirait pas la persistance des données au-delà de sa durée de vie de manière aussi efficace que GCS.