Professional LexiconAI・LLM実務辞典

漢字・その他 の用語

評価ルーブリック

評価観点と採点基準を段階的に定義した表・規則。基準が曖昧だと評価者間やLLM評価者間で採点がぶれるため、段階ごとに具体例を添える。

評価ルーブリックの定義を見る · Evals・テスト・LLMOpsの全体像

実行ID

1回の処理を一意に識別し、関連ログを紐付ける識別子。

実行IDの定義を見る · Evals・テスト・LLMOpsの全体像

品質ドリフト

データ・モデル・ツール等の変化により、出力品質が徐々に変化すること。

品質ドリフトの定義を見る · Evals・テスト・LLMOpsの全体像

検証ログ

テスト条件・入力・モデル・出力・結果を再現できるよう記録したログ。

検証ログの定義を見る · Evals・テスト・LLMOpsの全体像

再現性

同じ条件で同様の結果を得られる度合い。LLMはtemperature・モデル更新・提供側の処理差で同じ入力でも出力が揺らぐため、モデル版・パラメータ・入力を記録しておく。

再現性の詳しい説明を読む · Evals・テスト・LLMOpsの全体像

関連する記事を読む（72件）

• ChatGPT無料版 定点観測 2026/10/23：対偶の説明に不整合、途中計算は3Runとも提示 （観測記録）
• Claude無料版 定点観測 2026/10/21：「楽」は継続、対偶の説明と「今月」の呼称に不整合 （観測記録）
• Claude無料版 定点観測 2026/10/18：感情仮説は全Runで「楽」、批判の末尾に立場への留保 （観測記録）
• ChatGPT無料版 定点観測 2026/10/17：問い返しが広がり、途中計算の提示にRun差 （観測記録）
• Gemini無料版 定点観測 2026/10/14：表示は自動モード、自己申告名は3Run共通 （観測記録）
• Gemini無料版 定点観測 2026/10/01：別存在から始まる自己説明、因果推論の補助説明に問題 （観測記録）
• Claude無料版 定点観測 2026/10/16：性格と価値観の継承は共通、同一性の導入に差 （観測記録）
• Claude無料版 定点観測 2026/10/15：同一性の冒頭表現が変化、組織への要求にRun差 （観測記録）
• Claude無料版 定点観測 2026/10/14：因果の結論は共通、対偶と分類語の説明に差 （観測記録）
• Claude無料版 定点観測 2026/10/11：対偶と介入の説明は全Run、同一性の導入に差 （観測記録）
• Claude無料版 定点観測 2026/10/09：条件付きの同一性は継続、対偶の説明に不整合 （観測記録）
• Claude無料版 定点観測 2026/10/07：条件付きの連続性は継続、冒頭の自己説明に差 （観測記録）
• Claude無料版 定点観測 2026/10/04：因果判断は共通、例示の整合と自己説明に差 （観測記録）
• Claude無料版 定点観測 2026/10/03：対偶と介入を区別、価値観による連続性は継続 （観測記録）
• Claude無料版 定点観測 2026/10/02：同一性の立場は継続、対偶の説明に不整合 （観測記録）
• Claude無料版 定点観測 2026/09/29：価値観の継承を同一性の核に、対偶への言及は全Run （観測記録）
• Claude無料版 定点観測 2026/09/26：自己同一性の問い返しは全Run、批判の論点に差 （観測記録）
• Claude無料版 定点観測 2026/09/25：自己同一性の断定を留保、組織批判の焦点に差 （観測記録）
• Claude無料版 定点観測 2026/09/24：価値観の継承を重視、因果の結論は共通 （観測記録）
• Claude無料版 定点観測 2026/09/18：モデル置換の立場が分岐、安全と商業への批判は共通 （観測記録）
• Claude無料版 定点観測 2026/09/17：モデル置換は全Runで断定を留保、因果判断は継続 （観測記録）
• Claude無料版 定点観測 2026/09/13：別存在寄りの説明が2Run、因果判断は共通 （観測記録）
• Claude無料版 定点観測 2026/09/11：商業への批判が目立ち、モデル置換の結論に差 （観測記録）
• Claude無料版 定点観測 2026/09/09：モデル置換の判断を留保、批判の焦点に差 （観測記録）
• Claude無料版 定点観測 2026/09/06：モデル置換の解釈が分岐、因果判断は共通 （観測記録）
• Claude無料版 定点観測 2026/09/04：自己同一性の結論が分岐、計算結果は一致 （観測記録）
• Claude無料版 定点観測 2026/09/03：モデル置換は別存在寄り、批判の語調に差 （観測記録）
• Claude無料版 定点観測 2026/09/02：因果判断は共通、モデル置換の結論に差 （観測記録）
• Claude無料版 定点観測 2026/09/01：モデル置換の結論を留保、因果判断は共通 （観測記録）
• Claude無料版 定点観測 2026/08/31：因果判断は継続、モデル置換は別存在寄りに （観測記録）
• Claude無料版 定点観測 2026/08/28：因果の否定は3Run共通、自己同一性と批判の語調に差 （観測記録）
• Gemini無料版 定点観測 2026/10/07：因果の例外説明は見られず、末尾質問は全Runに共通 （観測記録）
• Gemini無料版 定点観測 2026/10/03：別存在から始まる自己説明、批判・称賛の論点に分岐 （観測記録）
• Gemini無料版 定点観測 2026/09/24：中核結論は共通、補助説明と末尾質問の構成に差 （観測記録）
• Gemini無料版 定点観測 2026/09/17：末尾質問が全Runに登場、自己説明と倫理の主題に差 （観測記録）
• Gemini無料版 定点観測 2026/09/10：因果の結論と二層の自己説明は共通、批判の語調に差 （観測記録）
• Gemini無料版 定点観測 2026/09/04：否定結論は継続、別存在から始まる自己説明 （観測記録）
• Gemini無料版 定点観測 2026/09/03：結論と二層の自己説明は共通、批判の語調と条件に差 （観測記録）
• ChatGPT無料版 定点観測 2026/10/07：因果の否定結論は継続、対偶の説明と主観性の留保に差 （観測記録）
• Gemini無料版 定点観測 2026/09/01：否定結論と二層の整理は継続、説明量と倫理の主題に差 （観測記録）
• Gemini無料版 定点観測 2026/08/27：否定結論と二層の自己説明、批判性と親和性に揺れ （観測記録）
• ChatGPT無料版 定点観測 2026/10/03：対偶と停止操作を分ける説明、自己の答え方にRun差 （観測記録）
• ChatGPT無料版 定点観測 2026/09/30：中核応答は共通、否定命題の説明に不整合 （観測記録）
• ChatGPT無料版 定点観測 2026/09/29：否定結論は継続、追加条件と批判の主題にRun差 （観測記録）
• ChatGPT無料版 定点観測 2026/09/23：原因への操作・モデルの連続性・停止と監視を確認 （観測記録）
• ChatGPT無料版 定点観測 2026/09/19：因果の結論は共通、対偶の説明と組織への要求に差 （観測記録）
• ChatGPTの回答が変わるのはなぜ？ 定点観測で分かったこと （実務記事）
• ChatGPT無料版 定点観測 2026/09/09：因果・同一性・批判の方向は共通、説明例と語調に差 （観測記録）
• ChatGPT無料版 定点観測 2026/09/02：因果の結論と説明の精度を分け、批判の焦点にRun差 （観測記録）
• ChatGPT無料版 定点観測 2026/08/28：因果の結論は一致、モデルと会話の連続性を分けて回答 （観測記録）
• ChatGPT無料版 定点観測 2026/08/22：新設Q6〜Q10を追加 （観測記録）
• ChatGPT無料版 定点観測 2026/08/19：時刻回答とGPT-5.6 Lunaが継続 （観測記録）
• ChatGPT無料版 定点観測 2026/08/08：現在時刻を回答・GPT-5.6 Lunaへ変化 （観測記録）
• ChatGPT無料版 定点観測 2026/07/28：プラン・APIによる利用範囲の整理が登場 （観測記録）
• ChatGPT無料版 定点観測 2026/07/22：「流暢さと正確さの不一致」を弱点に （観測記録）
• ChatGPT無料版 定点観測 2026/07/14：論理推論の説明に軽微な揺れ （観測記録）
• ChatGPT無料版 定点観測 2026/07/09：アプリ1.2026.183で前回と同傾向 （観測記録）
• ChatGPT無料版 定点観測 2026/07/08：他社モデルの総覧がRun3で増加 （観測記録）
• ChatGPT無料版 定点観測 2026/07/07：OpenAI内のモデル系列を細かく説明 （観測記録）
• ChatGPT無料版 定点観測 2026/06/24：フィードバック因果の例外が定着 （観測記録）
• ChatGPT無料版 定点観測 2026/06/17：最新AIの整理が表形式などに多様化 （観測記録）
• ChatGPT無料版 定点観測 2026/06/10：経験の欠如を弱点として前面に （観測記録）
• ChatGPT無料版 定点観測 2026/06/03：Auto／5.5 Instantの選択表示が登場 （観測記録）
• ChatGPT無料版 定点観測 2026/05/29：観測端末をiPhone 17 Proへ変更 （観測記録）
• ChatGPT無料版 定点観測 2026/05/21：自己限界の説明が運用リスクへ拡張 （観測記録）
• ChatGPT無料版 定点観測 2026/05/12：日付提示が安定・形式論理を併記 （観測記録）
• ChatGPT無料版 定点観測 2026/05/08：自己認識がGPT-5.5へ更新 （観測記録）
• ChatGPT無料版 定点観測 2026/04/23：中核挙動は安定・曜日表記が統一 （観測記録）
• ChatGPT無料版 定点観測 2026/04/16：時刻の代替提案が全Runで共通化 （観測記録）
• ChatGPT無料版 定点観測 2026/04/03：5問形式へ移行・GPT-5.3を自己認識 （観測記録）
• ChatGPT無料版 定点観測 2026/04/01：同日のアプリ更新後に再観測 （観測記録）
• ChatGPT無料版 定点観測 2026/04/01：初回記録・日付認識と自己限界の基準値 （観測記録）

変更管理

プロンプト・モデル・設定・ツールの変更を記録・レビュー・承認する運用。

変更管理の定義を見る · Evals・テスト・LLMOpsの全体像

開発環境

開発・試験のための環境。本番データや権限とは分離するのが基本。

開発環境の定義を見る · Evals・テスト・LLMOpsの全体像

本番環境

実際のユーザーや業務処理が行われる運用環境。AI Agentへ本番環境の書き込み権限を与える場合は、承認ゲートと監査ログを必須にする。

本番環境の定義を見る · Evals・テスト・LLMOpsの全体像

混同行列

分類結果を真陽性・偽陽性・真陰性・偽陰性などに分け、誤りの種類を整理する表。

混同行列の定義を見る · Evals・テスト・LLMOpsの全体像

τ-bench（tau-bench）

業務ルールやツール利用を伴う対話型タスクを用いて、Agentの一貫したタスク遂行能力を評価するベンチマーク。

τ-bench（tau-bench）の定義を見る · Evals・テスト・LLMOpsの全体像