Re Reference AI
LLMOpsに関連する用語(2件)
LLMOpsは、LLMを本番環境で運用するための開発・監視・改善のプラクティス全般を指します。プロンプト管理、評価、コスト監視、デプロイなどLLM特有の運用課題を扱います。
LLMアプリケーションをビジュアルなワークフロー画面で構築・運用できるオープンソースのLLMOpsプラットフォーム
W&B / wandb
機械学習の実験管理を中心とするMLOpsプラットフォーム。LLM向けのトレース・評価機能も提供