Re Reference AI
人間評価に関連する用語(1件)
人間評価は、AIモデルの出力品質を人間の判断で評価する手法です。自動評価では捉えにくい有用性や自然さを測定でき、RLHFの報酬モデル構築やベンチマーク検証に用いられます。
LMArena
人間の実際の投票による対戦形式で、LLM同士の相対的な性能を評価するベンチマークプラットフォーム