Şirket içi Hadoop'u uzun süreli toplu işler için yönetilen, hataya dayanıklı, uygun maliyetli bir bulut çözümüne geçirin. Ne dağıtmalısınız?

Şirket içi Hadoop iş yüklerini yönetilen, hataya dayanıklı ve uygun maliyetli bir bulut çözümüne taşımak için Dataproc idealdir. Dataproc, Hadoop ve Spark kümelerini kolayca dağıtmanıza ve yönetmenize olanak tanır. Uzun süreli toplu işler için standart kalıcı diskler yeterlidir ve maliyet etkinliği sağlar. %50 öncelikli çalışanlar, maliyetleri daha da düşürürken, hataya dayanıklılık için Dataproc'un otomatik yeniden deneme ve kurtarma yetenekleri devreye girer. Verilerin Cloud Storage'da depolanması, HDFS'nin yerini alarak ölçeklenebilirlik, dayanıklılık ve maliyet avantajları sunar. Komut dosyalarının hdfs:// yerine gs:// kullanacak şekilde güncellenmesi, Cloud Storage ile entegrasyonu sağlar. SSD kalıcı diskler, bu senaryo için gereksiz yere daha pahalıdır çünkü uzun süreli toplu işler genellikle yüksek IOPS gerektirmez. Compute Engine üzerine Hadoop/Spark'ı manuel olarak kurmak, yönetilen bir hizmet olan Dataproc'un sunduğu kolaylık ve otomasyonu sağlamaz ve yönetim yükünü artırır. Verileri HDFS'de depolamak, Cloud Storage'ın sunduğu avantajlardan (ölçeklenebilirlik, dayanıklılık, maliyet) vazgeçmek anlamına gelir.