HeadlinesBriefing favicon HeadlinesBriefing.com

Wahrhaftige KI: Über RAG hinaus zu evidenzbasierten Systemen

Towards Data Science •
×

Es gibt einen Kategorienfehler in vielen LLM-Systemen: Dokumente abrufen, sie in den Kontext stellen und die Antwort als "fundiert" bezeichnen. Der Abruf bietet Zugang zu Kandidaten für Beweise, beweist aber nicht, dass ein abgerufener Abschnitt eine Behauptung stützt. Ein Abschnitt kann veraltet, unvollständig, thematisch ähnlich, aber nicht implizierend, widersprüchlich, unzuverlässig oder bösartig injiziert sein. Das ursprüngliche RAG-Papier identifizierte die Herkunft als offenes Problem.

Das Post-RAG-Ziel muss ein evidenzbasiertes narratives System sein, in dem jede materielle Aussage überprüfbare Unterstützung erhält, jede Geschäftsentscheidung nachvollziehbar ist und Unsicherheit eine erstklassige Darstellung hat. Die Optimierung des Beweissystems schafft ein Artefakt, das ein Entwickler überprüfen kann. Die neue Kontrolleinheit ist die atomare Behauptung, nicht Dokumente. Ein Behauptungsregister listet alle atomaren Behauptungen mit Beweisen und Kontrollen auf: eine stabile claim_id, Behauptungstext mit genauer Spanne, wörtliche Beweisspannen, kanonische Quelle mit Inhalts-Hash, Abrufkontext und eine Unterstützungsentscheidung (direkt unterstützt, erlaubte Synthese, unzureichende Beweise, widersprüchliche Beweise, nicht unterstützt).

Das nicht verhandelbare Veröffentlichungstor: Eine materielle Behauptung ohne akzeptable Unterstützung ist eine Aufforderung zur Überarbeitung, Enthaltung, Kennzeichnung als Inferenz oder Eskalation. Dies erzwingt eine Produktentscheidung zwischen nicht unterstützter Flüssigkeit und sichtbarer Unsicherheit.

Wichtige Entitäten: Unternehmen: Towards Data Science