Re Reference AI

LLM

LLMに関連する用語(57件)

LLM(Large Language Model、大規模言語モデル)は、大量のテキストデータから学習した大規模なニューラルネットワークです。文章生成・要約・翻訳・コード生成など幅広いタスクをこなし、現代の生成AIの中心的存在です。

用語一覧

RAG

検索拡張生成 / Retrieval-Augmented Generation

検索(Retrieval)と生成モデルを組み合わせ、外部知識に基づいて出力を根拠づける手法

技術NLP検索LLM

ハルシネーション

Hallucination

LLMが事実に基づかない内容を、もっともらしく生成してしまう現象

技術LLM信頼性

トークン

Token

LLMなど自然言語処理モデルがテキストを入出力する際に扱う最小の処理単位

技術NLPトークナイゼーションLLM

コンテキストウィンドウ

Context Window

LLMが一度の推論で参照できる入力・出力トークンの合計量の上限

技術LLMトークン

プロンプト

Prompt

LLMに入力する指示・質問・文脈などのテキスト

技術LLM入力設計

プロンプトエンジニアリング

Prompt Engineering

LLMから望む出力を引き出すために、プロンプトの書き方を設計・改善する手法

技術LLM入力設計

システムプロンプト

System Prompt

会話の冒頭でLLMに与える、応答全体の振る舞いや役割を規定する特別な指示

技術LLM入力設計

Chain-of-Thought

CoT / 思考の連鎖

最終的な答えに至る過程を段階的に言語化させることで、LLMの推論精度を高めるプロンプティング手法

技術LLM推論プロンプトエンジニアリング

推論モデル

Reasoning Model

出力前に長い内部推論過程を生成し、複雑な問題の精度を高めるよう最適化されたLLM

モデルLLM推論

Temperature

温度パラメータ

LLMの出力トークン選択のランダム性を調整する、確率分布のサンプリングパラメータ

技術LLMデコーディングサンプリング

Top-p

Nucleus Sampling / 核サンプリング

累積確率が閾値 p に達するまでの上位トークン群だけからサンプリングする、核サンプリング手法

技術LLMデコーディングサンプリング

Top-k

Top-k Sampling

確率が高い上位 k 個のトークンのみを候補に絞ってサンプリングする手法

技術LLMデコーディングサンプリング

Seed

乱数シード

乱数生成の初期値。同じ値を指定することでLLMの出力サンプリング結果を再現できる

技術LLMデコーディング再現性

アライメント

Alignment

LLMの出力を人間の意図・価値観・安全基準に沿わせるための研究・技術分野

技術安全性LLM

AIエージェント

AI Agent / エージェント

LLMを中核に、周囲の状況を認識し計画を立てツールを使って自律的にタスクを遂行するシステム

エージェントLLM自律システム

エージェンティックAI

Agentic AI

単発の応答生成ではなく、自律的な計画・行動・ツール利用を通じてタスクを遂行するAI設計の潮流

エージェントLLM自律システム

ツールコーリング

Tool Calling / ツール呼び出し

LLMが外部の関数・API・ツールを呼び出し、その実行結果を応答に反映する仕組み

エージェントLLMツール連携

ファンクションコーリング

Function Calling / 関数呼び出し

LLMに外部関数の呼び出し内容を構造化データとして出力させる、OpenAIが導入したツール連携の仕組み

エージェントLLMツール連携

MCP

Model Context Protocol

LLMアプリケーションと外部のツール・データソースを標準化された方法で接続するオープンプロトコル

エージェントLLMツール連携プロトコル

推論

Inference

学習済みモデルへ入力を与え、出力を計算する処理

技術LLM推論

デコーディング

Decoding / デコード

モデルが計算した確率分布から、次に出力するトークンを実際に選び取る処理

技術LLMデコーディング

ストリーミング

Streaming

LLMが生成したトークンを、完成を待たずに逐次クライアントへ送信する応答方式

技術LLMAPI

GPT

Generative Pre-trained Transformer

OpenAIが開発する、デコーダのみのTransformerに基づく生成AIモデルファミリー

モデルLLMOpenAIクローズドウェイト

Claude

Anthropicが開発する、安全性とアライメントを重視した大規模言語モデルファミリー

モデルLLMAnthropicクローズドウェイト

Gemini

Googleが開発する、テキスト・画像・音声等を統合的に扱うマルチモーダル大規模言語モデルファミリー

モデルLLMGoogleマルチモーダル

Llama

LLaMA

Metaが開発する、研究・商用利用向けに重みを公開しているオープンウェイトの大規模言語モデルファミリー

モデルLLMMetaオープンウェイト

Mistral

フランスのMistral AIが開発する、効率性を重視したオープンウェイトの大規模言語モデルファミリー

モデルLLMオープンウェイト

DeepSeek

中国のDeepSeekが開発する、高いコスト効率と推論能力を特徴とするオープンウェイトの大規模言語モデルファミリー

モデルLLMオープンウェイト推論

Qwen

通義千問

中国のAlibaba Cloudが開発する、多言語対応を強みとするオープンウェイトの大規模言語モデルファミリー

モデルLLMオープンウェイト多言語

Phi

Microsoftが開発する、高品質な学習データを重視した小規模言語モデルファミリー

モデルLLMSLMオープンウェイト

Gemma

Googleが公開する、Geminiの研究成果をもとに構築された軽量なオープンウェイトモデルファミリー

モデルLLMオープンウェイトGoogle

プロンプトインジェクション

Prompt Injection

悪意ある指示を入力に紛れ込ませ、LLMに開発者の意図しない挙動をさせる攻撃手法

技術安全性LLM

ジェイルブレイク

Jailbreak

特殊なプロンプトによってLLMに組み込まれた安全性の制約を回避させる手法

技術安全性LLM

ガードレール

Guardrails

LLMアプリケーションの入出力を監視・制御し、有害な出力や情報漏洩を防ぐための仕組み

技術安全性LLM

PaLM

Pathways Language Model

Googleが開発した、Pathwaysという分散学習システムを用いて学習された大規模言語モデル

モデルLLM

スケーリング則

Scaling Laws

モデルサイズ・データ量・計算量を増やすほど、損失が予測可能な形でべき乗則的に改善するという経験則

技術LLM学習

創発的能力

Emergent Abilities

モデル規模がある閾値を超えたときに、小規模モデルには見られなかった能力が急激に現れる現象

技術LLMスケーリング

Zero-shot

ゼロショット

タスクの例を1つも示さず、指示文だけでLLMに未知のタスクをこなさせる手法

技術プロンプトエンジニアリングLLM

Grok

イーロン・マスク率いるxAIが開発する、X(旧Twitter)との統合を特徴とする大規模言語モデルファミリー

モデルLLMマルチモーダル

Cohere

Command R

カナダのCohereが開発する、企業向けRAG・検索用途に強みを持つLLM・埋め込みモデルファミリー

モデルLLM埋め込み

モデル抽出攻撃

Model Extraction Attack / Model Stealing

APIへの大量の問い合わせと応答の観察から、対象モデルの挙動を模倣する代替モデルを構築する攻撃

技術セキュリティLLM

電子透かし

Watermarking / AIウォーターマーク

生成テキストの単語選択に統計的な偏りを埋め込み、AI生成コンテンツかどうかを後から検出可能にする技術

技術セキュリティLLM

事前学習

Pre-training / Pretraining

大規模データから汎用的な知識や表現をあらかじめ学習させ、下流タスクの土台を作る学習段階

技術学習事前学習LLM

VLM

Vision-Language Model / 視覚言語モデル / VLM(Vision Language Model)

画像と言語を同時に理解し、画像に関する質問応答や説明生成ができるマルチモーダルモデル

モデルマルチモーダルLLM画像認識

ロングコンテキスト

Long Context / Long-Context LLM

非常に長い入力を一度に処理し、その内容を精度良く活用できるLLMの能力、およびそれを実現するための技術群

技術LLMコンテキストウィンドウ

コンテキストエンジニアリング

Context Engineering

限られたコンテキストウィンドウ内でLLMやエージェントが最大の性能を発揮できるよう、渡す情報全体(指示・例・ツール定義・検索結果・記憶等)を設計する実践

技術LLM入力設計

Diffusion LLM

拡散型LLM / Diffusion Language Model

自己回帰的に1トークンずつ生成するのでなく、ノイズ除去過程を繰り返してテキストを並列生成するLLM

アーキテクチャLLMデコーディング

テスト時スケーリング

Test-time Scaling / Test-time Compute / 推論時スケーリング

学習済みモデルの推論時に計算量を追加投入し、思考の長文化や複数候補の生成・選別によって回答品質を高めるアプローチ

技術推論スケーリングLLM

GRPO

Group Relative Policy Optimization / グループ相対方策最適化

価値関数モデルを使わず、同一プロンプトから生成した複数出力のグループ内比較で優位性を計算する、LLM向けの強化学習アルゴリズム

技術強化学習学習LLM

RLVR

Reinforcement Learning with Verifiable Rewards / 検証可能報酬による強化学習

学習済みの報酬モデルの代わりに、数学の正誤判定やテストの合否など機械的に検証できる報酬を使ってLLMを強化学習する手法

技術強化学習学習LLM

llms.txt

llms-full.txt

WebサイトのルートにMarkdown形式で置き、LLMにサイトの概要と主要コンテンツを伝える提案仕様

技術コンテンツ最適化LLM

基盤モデル

Foundation Model / ファウンデーションモデル

大量のデータで事前学習され、ファインチューニングやプロンプトによって幅広いタスクへ適応できる汎用モデル

モデル事前学習LLM

フロンティアモデル

Frontier Model / フロンティアAI

その時点で最も高い能力を持つ一群の基盤モデルを指す、主に安全性・政策の文脈で使われる言葉

モデルLLM安全性

Kimi

Kimi K2 / Moonshot AI Kimi

中国のMoonshot AIが開発するLLMシリーズ。オープンウェイトの大規模MoEモデルKimi K2で注目された

モデルLLMオープンウェイト

In-Context Learning

ICL / 文脈内学習

重みを更新せず、プロンプト内の例示や指示だけから新しいタスクの解き方を捉えて実行するLLMの能力

技術LLMプロンプトエンジニアリング

モデルマージ

Model Merging / モデル融合

複数の学習済みモデルの重みを演算で合成し、追加学習なしで新しいモデルを作る手法

技術LLM学習

Ornith

Ornith-1.0

AlibabaのQwen 3.5とGoogleのGemma 4を基盤に、エージェント型コーディング向けへ強化学習で自己改善させたオープンウェイトLLMファミリー

モデルLLMオープンウェイトコーディングエージェント