評価指標
評価指標に関連する用語(7件)
評価指標は、モデルの性能を定量的に測るための尺度です。精度・F1スコア・BLEUなどタスクに応じた指標があり、適切な指標選択が正しい性能評価の前提となります。
用語一覧
BLEU
Bilingual Evaluation Understudy
機械翻訳の出力と参照訳とのn-gramの一致度から翻訳品質を自動評価する指標
評価機械翻訳評価指標
ROUGE
Recall-Oriented Understudy for Gisting Evaluation
生成された要約と参照要約との単語の重なりから、要約品質を自動評価する指標群
評価要約評価指標
適合率
Precision
モデルが陽性と予測した事例のうち、実際に正しかった割合を示す評価指標
評価評価指標分類
再現率
Recall
実際に陽性である事例のうち、モデルが正しく検出できた割合を示す評価指標
評価評価指標分類
F1スコア
F1 Score / F値
適合率と再現率の調和平均により、両者をバランスよく評価する指標
評価評価指標分類
Win Rate
勝率
2つのモデル出力を比較した際にどちらがより高い頻度で選好されたかを表す評価指標
評価評価指標選好比較
重要度評価
Importance Scoring / Saliency Scoring
モデル内の重み・ニューロン・層が出力にどの程度寄与しているかを定量化し、削減対象の判断に用いる評価
技術モデル圧縮評価指標