アノテーション（Annotation）とは
Annotation
学習・評価用データに正解ラベルや付加情報を人手で付与する作業
概要
アノテーションは、画像・テキスト・音声などの生データに対して、分類ラベル・境界ボックス・固有表現タグ・選好比較の判定といった正解情報や付加情報を人手(またはツール支援)で付与する作業。 教師あり学習の学習データやモデル評価用データセットの多くは、アノテーション作業を経て作成される。 作業量やコストが大きな課題となりやすく、複数の作業者による評価の一致度(inter-annotator agreement)の管理、クラウドソーシングの活用、擬似ラベリングによる作業量削減などの対策を実施する。 LLMのRLHFにおいても、出力の優劣を判定する選好アノテーションが報酬モデル学習の基盤データとなる。