Die LLM-Protokollierung erfasst Eingabeaufforderungen und Abschlüsse – beschreibende Daten darüber, was passiert ist. Die Entscheidungsverfolgung erfasst, WARUM Entscheidungen getroffen wurden – strukturiertes Denken mit Pro-/Kontra-Argumenten, Präzedenzfällen und Begründungen. Die Protokollierung ermöglicht das Debugging. Die Entscheidungsverfolgung ermöglicht institutionelles Gedächtnis, die Suche nach Präzedenzfällen und erklärbare KI. AI Agentree bietet die Entscheidungsverfolgungsschicht, die die Protokollierung nicht ersetzen kann.
TL;DR: Die Protokollierung erfasst, was das Modell gesagt hat. Die Entscheidungsverfolgung erfasst, warum die Entscheidung getroffen wurde. Nur eine ermöglicht Präzedenz- und institutionelles Gedächtnis.
Protokollierung ist notwendig, aber unzureichend. Hier ist, was fehlt.
Beschreibend: "Das ist passiert"
// Log entry
{
"prompt": "Should we approve...",
"completion": "Yes, approved...",
"tokens": 847,
"latency_ms": 1234
}
Sie können dieses Protokoll finden. Aber können Sie finden, wie Sie ähnliche Fälle entschieden haben?
Normativ: "Das unterstützt/widerspricht, weil..."
// Decision trace
{
"decision": "APPROVED",
"pro_arguments": [...],
"con_arguments": [...],
"precedent_cited": "D-1234",
"rationale_ids": [...]
}
Abfragbar nach Denkmustern. Zitierbar als Präzedenzfall.
| Aspekt | LLM-Protokollierung | Entscheidungsverfolgung |
|---|---|---|
| Was es erfasst | Eingaben, Abschlüsse, Tokens, Latenz | Argumentationsstruktur, Präzedenzfälle, Begründung |
| Datenstruktur | Unstrukturierter Text, flache Metadaten | Strukturierte Argumentationsbäume, normative Beziehungen |
| Abfragefähigkeit | 'Finde Protokolle, die X enthalten' | 'Finde Entscheidungen, die Y basierend auf dem Argumentationsmuster ähnlich sind' |
| Unterstützt Präzedenzfälle | ||
| Institutionelles Gedächtnis | ||
| Erklärbarkeit | Zeigt, was das Modell gesagt hat | Zeigt, warum die Entscheidung getroffen wurde |
| Compliance-Wert | Prüfpfad von Ereignissen | Prüfpfad der Argumentation |
"Wie haben wir ähnliche Rückerstattungsanfragen behandelt?" erfordert eine Struktur des Denkens, nicht die Textsuche. Protokolle finden übereinstimmende Wörter. Spuren finden übereinstimmende Muster.
Wissen, das sich im Laufe der Zeit ansammelt, erfordert strukturierte Entscheidungen. Protokolle sind Archäologie. Spuren sind Architektur.
Agenten, die frühere Entscheidungen zitieren, benötigen strukturiertes Präzedenz. "Wir haben D-1234 unter ähnlichen Bedingungen genehmigt" erfordert Entscheidungsspuren.
"Warum hat die KI X entschieden?" benötigt eine strukturierte Begründung. Gedankenkette ist nachträglich. Entscheidungsspuren sind die Grundlage der Wahrheit.
Die Verfolgung, welche Denkweisen zu guten Ergebnissen führen, erfordert Struktur. Protokolle können Argumente nicht mit Ergebnissen korrelieren.
Der Übergang von Mensch-in-der-Schleife zu vollständiger Autonomie erfordert Beweise. Entscheidungsspuren beweisen die Entscheidungsqualität. Protokolle beweisen die Ausführung.
LLM-Logging erfasst Eingaben, Ausgaben und Metadaten (Tokens, Latenz). Entscheidungsverfolgung erfasst strukturiertes Denken: Pro-/Kontra-Argumente, zitierte Präzedenzfälle, Vertrauensniveaus und die Begründung, die die Entscheidung getragen hat. Logging ist beschreibend; Verfolgung ist normativ.
Eingabe-/Ausgabeprotokolle erfassen nicht die Struktur des Denkens. Sie können nicht abfragen 'wie haben wir ähnliche Fälle behandelt?' oder 'welche Präzedenzfälle unterstützen diese Entscheidung?' aus Rohtextprotokollen. Entscheidungsverfolgung erstellt strukturierte Artefakte, die die Suche nach Präzedenzfällen und institutionelles Gedächtnis ermöglichen.
Nein. Ketten-Denken wird nachträglich vom Modell erzeugt – es ist nicht treu zu internen Berechnungen. Zwei Eingaben können die gleiche Antwort mit unterschiedlichen 'Erklärungen' produzieren. Entscheidungsverfolgung erfasst strukturierte Artefakte zum Zeitpunkt der Entscheidung, nicht rekonstruierte Erzählungen.
Nicht effektiv. Präzedenz erfordert normative Beziehungen (unterstützt/entgegengesetzt), keine beschreibenden (enthält/erwähnt). Protokollbasierte Suche findet ähnlichen Text; Entscheidungsverfolgung findet ähnliche Denkstrukturen. Der Unterschied ist grundlegend.
Ja. Behalten Sie Ihr Logging für Debugging, Kostenverfolgung und Compliance. Fügen Sie Entscheidungsverfolgung für Erklärbarkeit, Präzedenz und institutionelles Gedächtnis hinzu. Sie dienen unterschiedlichen Zwecken und arbeiten zusammen.
Vorschriften verlangen zunehmend, dass KI-Entscheidungen erklärt werden. Protokolle zeigen, was das Modell gesagt hat. Entscheidungsverfolgungen zeigen, warum die Entscheidung getroffen wurde, welche Alternativen in Betracht gezogen wurden und welche Beweise sie unterstützt haben. Das ist es, was Prüfer und Regulierungsbehörden tatsächlich benötigen.
Erfassen Sie, WARUM Ihre KI entscheidet, nicht nur, was sie sagt.