Bir şirket, Amazon Bedrock ile üretken bir metin özetleme modeli oluşturdu ve modelin doğruluğunu ölçmek için Bedrock'ın otomatik model değerlendirmesini kullanmak istiyor. Üretilen özetlerin kalitesini değerlendirmek için en uygun değerlendirme metriği hangisidir?
Bir cevap seçin
Cevabınızı kontrol etmek için bir seçeneğe dokunun.
Doğru cevap: BERTScore.
Neden bu cevap
BERTScore, üretilen metinlerin referans metinlerle anlamsal benzerliğini ölçtüğü için metin özetleme modellerinin kalitesini değerlendirmek için en uygun metriktir. Kelime örtüşmesinden ziyade bağlamsal anlamı dikkate alır, bu da özetlerin akıcılığını ve tutarlılığını daha iyi yansıtır. AUC, sınıflandırma modellerinin performansını ölçer. F1 skoru, hassasiyet ve geri çağırmanın harmonik ortalamasıdır ve genellikle sınıflandırma veya bilgi çıkarımı görevlerinde kullanılır, ancak metin özetleme için anlamsal kaliteyi tam olarak yakalamaz. RWK skoru, belirli bir Bedrock değerlendirme metriği değildir ve genel bir kavramdır.
Sonsuz cevap arayışı olmadan sınavınızı geçin
Bu sınav için her doğrulanmış soruyu ve açıklamayı tek bir yerde edinin ve saatlerce süren hazırlıktan tasarruf edin. 1.000'den fazla sertifika · 20'den fazla dil · ücretsiz başlayın.
Sınavınızı daha hızlı geçin → Kart gerekmez