Bir şirket, metin özetleme görevi için büyük dil modellerini karşılaştırıyor ve özet kalitesini değerlendirmek için bir metriğe ihtiyaç duyuyor. Hangi metrik uygundur?
Bir cevap seçin
Cevabınızı kontrol etmek için bir seçeneğe dokunun.
Doğru cevap: Recall-Oriented Understudy for Gisting Evaluation (ROUGE).
Neden bu cevap
ROUGE (Recall-Oriented Understudy for Gisting Evaluation), metin özetleme ve makine çevirisi gibi doğal dil işleme görevlerinde üretilen özetlerin kalitesini değerlendirmek için yaygın olarak kullanılan bir metrik setidir. Referans özetler ile model tarafından üretilen özetler arasındaki kelime veya n-gram örtüşmesini ölçer. Recall, bir sınıflandırma modelinin pozitif örnekleri ne kadar iyi yakaladığını gösterir, ancak özet kalitesi için doğrudan bir ölçüt değildir. AUC, ikili sınıflandırma modellerinin performansını değerlendirmek için kullanılır. MSE, regresyon problemlerinde tahmin hatalarını ölçer. Bu nedenle, metin özetleme kalitesini değerlendirmek için en uygun metrik ROUGE'dur.
Sonsuz cevap arayışı olmadan sınavınızı geçin
Bu sınav için her doğrulanmış soruyu ve açıklamayı tek bir yerde edinin ve saatlerce süren hazırlıktan tasarruf edin. 1.000'den fazla sertifika · 20'den fazla dil · ücretsiz başlayın.
Sınavınızı daha hızlı geçin → Kart gerekmez