Bir şirket kısa süre önce AWS Cloud'a geçti ve Amazon S3'te depolanan yarı yapılandırılmış bir veri kümesinin (loglar, medya dosyaları, işlemler, IoT) büyük ölçekli, isteğe bağlı paralel işlenmesi için sunucusuz bir çözüm istiyor. Çözüm, binlerce öğeyi paralel olarak işlemesi gerekiyor. Hangi seçenek EN FAZLA operasyonel verimlilik sağlar?

AWS Step Functions Map state'in Distributed modu, binlerce veya milyonlarca öğeyi paralel olarak işlemek için tasarlanmıştır ve her öğe için ayrı bir iş akışı yürütmesi başlatır. Bu, büyük ölçekli, yarı yapılandırılmış veri kümelerinin işlenmesi için idealdir ve operasyonel verimliliği en üst düzeye çıkarır çünkü Step Functions, hata işleme, yeniden denemeler ve durum yönetimi gibi karmaşıklıkları otomatik olarak yönetir. Inline mod, daha az sayıda öğe için uygundur ve Distributed modun ölçeklenebilirlik ve hata toleransı özelliklerine sahip değildir. AWS Glue, ETL (Çıkar, Dönüştür, Yükle) işleri için güçlü bir hizmet olsa da, Step Functions'ın durum yönetimi ve iş akışı orkestrasyonu yeteneklerini sunmaz. Birden çok AWS Lambda işlevi kullanmak, manuel orkestrasyon ve hata işleme gerektireceğinden operasyonel verimliliği düşürür.