LLMログはプロンプトと完了を記録します — 何が起こったかに関する記述データです。意思決定トレーシングは、なぜ決定がなされたのかを記録します — 賛否の議論、前例、根拠を含む構造化された推論です。ログはデバッグを可能にします。意思決定トレーシングは制度的記憶、前例検索、説明可能なAIを可能にします。AI Agentreeは、ログでは置き換えられない意思決定トレーシング層を提供します。
要約: ログはモデルが言ったことを記録します。意思決定トレーシングは、なぜその決定がなされたのかを記録します。前例と制度的記憶を可能にするのは、どちらか一方だけです。
ログは必要ですが不十分です。欠けているものはこれです。
記述的: "これが起こった"
// Log entry
{
"prompt": "Should we approve...",
"completion": "Yes, approved...",
"tokens": 847,
"latency_ms": 1234
}
このログを見つけることができます。しかし、似たようなケースをどうやって決定したかを見つけることができますか?
規範的: "これは...のために支持/反対します"
// Decision trace
{
"decision": "APPROVED",
"pro_arguments": [...],
"con_arguments": [...],
"precedent_cited": "D-1234",
"rationale_ids": [...]
}
推論パターンでクエリ可能です。前例として引用可能です。
| 側面 | LLMログ | 意思決定トレーシング |
|---|---|---|
| 何をキャプチャするか | プロンプト、完了、トークン、レイテンシ | 推論構造、前例、根拠 |
| データ構造 | 非構造化テキスト、フラットメタデータ | 構造化された議論の木、規範的関係 |
| クエリ機能 | 'Xを含むログを見つける' | '推論パターンに基づいてYに似た決定を見つける' |
| 前例をサポート | ||
| 制度的記憶 | ||
| 説明可能性 | モデルが言ったことを示す | 決定がなぜ行われたかを示す |
| コンプライアンスの価値 | イベントの監査トレイル | 推論の監査トレイル |
"類似の返金リクエストをどのように処理しましたか?" はテキスト検索ではなく、推論構造を必要とします。ログは一致する単語を見つけます。トレースは一致するパターンを見つけます。
時間とともに蓄積される知識は、構造化された意思決定を必要とします。ログは考古学です。トレースは建築です。
過去の決定を引用するエージェントは、構造化された前例を必要とします。"私たちは類似の条件下でD-1234を承認しました" は決定トレースを必要とします。
"なぜAIはXを決定したのか?" は構造化された根拠を必要とします。思考の連鎖は事後的です。決定トレースは真実の根拠です。
どの推論パターンが良い結果につながるかを追跡するには構造が必要です。ログは議論と結果を相関させることができません。
人間の介在から完全な自律性に移行するには証拠が必要です。決定トレースは決定の質を証明します。ログは実行を証明します。
LLMロギングはプロンプト、完了、およびメタデータ(トークン、レイテンシ)をキャプチャします。意思決定トレーシングは構造化された推論をキャプチャします:賛否の議論、引用された前例、自信レベル、および決定を下した理由。ロギングは記述的であり、トレーシングは規範的です。
プロンプト/出力ログは推論構造をキャプチャしません。生のテキストログから「どのようにして類似のケースを処理しましたか?」や「この決定を支持する前例は何ですか?」と問い合わせることはできません。意思決定トレーシングは前例検索と制度的記憶を可能にする構造化されたアーティファクトを作成します。
いいえ。チェーン・オブ・ソートはモデルによって事後的に生成されます — 内部計算に忠実ではありません。2つのプロンプトは異なる「説明」で同じ答えを生成することがあります。意思決定トレーシングは決定の時点で構造化されたアーティファクトをキャプチャし、再構築された物語ではありません。
効果的にはできません。前例には規範的な関係(支持/反対)が必要であり、記述的な関係(含む/言及する)ではありません。ログベースの検索は類似のテキストを見つけますが、意思決定トレーシングは類似の推論パターンを見つけます。その違いは根本的です。
はい。デバッグ、コスト追跡、およびコンプライアンスのためにロギングを維持してください。説明可能性、前例、および制度的記憶のために意思決定トレーシングを追加してください。彼らは異なる目的を持ち、一緒に機能します。
規制はますますAIの決定を説明することを要求しています。ログはモデルが何を言ったかを示します。意思決定トレースは、なぜその決定が下されたのか、どの代替案が考慮されたのか、そして何がそれを支持したのかを示します。これが監査人や規制当局が実際に必要とするものです。
AIが決定する理由を記録し、単に言うことだけではありません。