Migrez les tâches Hadoop de l'équipe de science des données sans modifier les tâches ni la conception de l'infrastructure, en minimisant les coûts et les efforts de gestion. Que déployez-vous ?

Dataproc est le service géré de Google Cloud pour Hadoop et Spark, ce qui minimise les efforts de gestion car il n'est pas nécessaire de gérer l'infrastructure sous-jacente. L'utilisation d'instances de worker préemptibles réduit considérablement les coûts, ce qui est un objectif clé. Les tâches Hadoop de science des données sont généralement tolérantes aux pannes et peuvent redémarrer en cas de préemption, ce qui les rend adaptées aux instances préemptibles. Créer un cluster Dataproc avec des instances standard serait plus coûteux. Déployer manuellement un cluster Hadoop sur Compute Engine, qu'il s'agisse d'instances standard ou préemptibles, augmenterait considérablement les efforts de gestion, ce qui va à l'encontre de l'objectif de minimisation des efforts.