Firma musi wybrać model Amazon Bedrock do użytku wewnętrznego i chce, aby model generował odpowiedzi w preferowanym przez pracowników stylu. Jakie jest najlepsze podejście do oceny, który model odpowiada temu preferowanemu stylowi?
Wybierz odpowiedź
Dotknij opcji, aby sprawdzić swoją odpowiedź.
Poprawna odpowiedź: Użyj ludzkich ewaluatorów z niestandardowymi zestawami danych promptów do oceny modeli..
Dlaczego to jest odpowiedź
Prawidłowa odpowiedź to użycie ludzkich ewaluatorów z niestandardowymi zestawami danych promptów. Preferowany styl odpowiedzi jest subiektywny i najlepiej oceniają go ludzie, którzy rozumieją kontekst i niuanse oczekiwanego języka. Niestandardowe zestawy danych promptów zapewniają, że ocena jest specyficzna dla wewnętrznych przypadków użycia firmy. Wbudowane zestawy danych promptów są ogólne i mogą nie odzwierciedlać specyficznych wymagań firmy dotyczących stylu. Publiczne rankingi modeli są przydatne do ogólnego porównania, ale nie uwzględniają unikalnych preferencji stylu. Metryki InvocationLatency w Amazon CloudWatch mierzą wydajność i szybkość, a nie jakość ani styl generowanych odpowiedzi.
Zdaj egzamin — bez niekończącego się szukania odpowiedzi
Uzyskaj wszystkie zweryfikowane pytania i wyjaśnienia do tego egzaminu w jednym miejscu i zaoszczędź godziny przygotowań. Ponad 1000 certyfikacji · Ponad 20 języków · Zacznij za darmo.
Zdaj egzamin szybciej → Karta nie jest wymagana