一家社群媒體公司想要比較 SageMaker JumpStart 中幾個大型語言模型 (LLM) 輸出的毒性,同時將操作工作量降到最低。哪種評估方法的操作開銷最少?
選擇一個答案
點擊一個選項來檢查您的答案。
正確答案: 自動模型評估.
為什麼這是答案
自動模型評估是操作開銷最少的方法,因為它使用預定義的指標和演算法來評估模型輸出,無需人工介入。這對於比較多個大型語言模型(LLM)的毒性特別有效率。群眾外包評估和使用人工審閱者進行模型評估都需要大量的人力資源和時間,因此操作開銷較高。來自人類回饋的強化學習(RLHF)雖然能有效提升模型性能,但其主要目的是訓練模型而非評估現有模型的毒性,且涉及複雜的訓練流程,操作開銷遠高於自動評估。
通過考試 — 無需無休止地尋找答案
集中一處獲取此考試的所有核實題目和解釋,節省數小時的準備時間。1,000 多種認證 · 20 多種語言 · 免費開始。
更快通過您的考試 → 無需信用卡