Re Reference AI
人間評価に関連する用語（2件）
人間評価は、AIモデルの出力品質を人間の判断で評価する手法です。自動評価では捉えにくい有用性や自然さを測定でき、RLHFの報酬モデル構築やベンチマーク検証に用いられます。
LMArena
人間の実際の投票による対戦形式で、LLM同士の相対的な性能を評価するベンチマークプラットフォーム
Subjective Evaluation
評価者個人の感覚や印象に基づいてモデル出力の質を判断する評価手法