Zum Inhalt springen
Individuell trainiert
Technik & Qualität

Halluzinationen vermeiden: KI-Assistent mit Wissensbasis

Warum ein Sprachmodell Fakten erfindet und wie eine Wissensbasis mit RAG Antworten an Ihre Inhalte bindet: Quellenbindung, Konfidenz-Schwellen, Übergabe.

13 Min. Lesezeit WissensbasisRAGAntwortqualitätHalluzinationenQuellenbindung

Ein KI-Assistent, der Kundinnen und Kunden Auskunft gibt, ist nur so verlässlich wie das, worauf er seine Antworten stützt. Genau hier liegt das größte Missverständnis über generative Sprachmodelle: Sie sind darauf trainiert, den nächstwahrscheinlichen Satz zu bilden, nicht darauf, die Wahrheit zu kennen. Fehlt die Anbindung an geprüfte Inhalte, kann ein Modell eine falsche Auskunft genauso selbstsicher formulieren wie eine richtige. In der Fachsprache heißt das Halluzination oder, wie es das NIST AI Risk Management Framework nennt, Konfabulation. Wie ernst das Thema in Unternehmen genommen wird, zeigt eine Erhebung: Rund 44 Prozent (McKinsey) der Organisationen berichten von mindestens einer negativen Folge durch generative KI, und knapp ein Viertel (McKinsey) dieser Fälle geht konkret auf ungenaue Ausgaben zurück. Sogar spezialisierte, an Fachdatenbanken angebundene Recherchewerkzeuge treffen daneben: In einer Untersuchung juristischer KI-Tools lag die Halluzinationsrate trotz Quellenanbindung zwischen 17 und 33 Prozent (Stanford HAI). Dieser Beitrag erklärt, warum ein generisches Modell Fakten erfindet, und wie eine gepflegte Wissensbasis mit Retrieval-Augmented Generation die Antworten an Ihre echten Inhalte bindet: über Quellenbindung, Konfidenz-Schwellen mit Eskalation an Menschen, den ehrlichen Umgang mit Wissenslücken und die Aktualität der Inhalte.

Antworten an die Wissensbasis bindenQuellenbindung, Konfidenz-Schwelle und ehrliche ÜbergabeWissensbasisWebsite & SeitenShop-Katalog & PreiseDokumente & FAQRAG-Abrufrelevante StellenGeerdete AntwortWelche Garantie gilt hier?Ja, es gelten 24 MonateHerstellergarantie.Quelle: Garantie-FAQKonfidenz: hochKonfidenz-SchwelleSchwelleÜber der Schwelle: Antwort aus der QuelleDarunter: Übergabe an einen MenschenWissenslücke? Kein Raten.Habt ihr Sondermodell Z?Dazu habe ich keine gesicherteAngabe. Ich hole jemanden dazu.Übergabe an das TeamGeerdet in Ihren Inhalten: mit Beleg antworten, bei Unsicherheit abgeben

Warum ein Sprachmodell Fakten erfindet

Ein großes Sprachmodell ist im Kern ein Wahrscheinlichkeitsrechner für Sprache. Es hat aus sehr vielen Texten gelernt, welche Wörter üblicherweise aufeinanderfolgen, und setzt eine Antwort Wort für Wort aus dem zusammen, was statistisch am besten passt. Das erklärt, warum die Ausgaben so flüssig und überzeugend klingen. Es erklärt aber auch das Grundproblem: Das Modell hat kein eingebautes Konzept davon, ob eine Aussage stimmt. Es unterscheidet nicht zwischen belegtem Wissen und einer plausibel klingenden Erfindung, sondern erzeugt in beiden Fällen einen gut formulierten Satz. Fehlt eine gesuchte Information, füllt das Modell die Lücke oft mit etwas, das passend aussieht, statt die Lücke offen einzuräumen.

Im Kundenkontakt wird daraus ein handfestes Risiko. Ein Assistent, der nicht an die eigenen Inhalte gebunden ist, kann einen Preis nennen, den es so nicht gibt, eine Rückgabefrist erfinden, ein Produkt beschreiben, das nicht im Sortiment ist, oder eine Zusage machen, die niemand treffen wollte. Gerade weil die falsche Antwort genauso souverän formuliert ist wie eine richtige, fällt der Fehler weder der fragenden Person noch dem Betrieb sofort auf. Was ein KI-Assistent im Grundsatz leistet und wo seine Grenzen liegen, ordnet unser Beitrag was ein KI-Chat-Assistent ist ein. Die entscheidende Stellschraube gegen erfundene Fakten ist, dem Modell eine geprüfte Grundlage zu geben, aus der es antworten soll.

Kurz erklärt: Halluzination und Konfabulation

Das NIST AI Risk Management Framework beschreibt Konfabulation, umgangssprachlich Halluzination, als die Erzeugung selbstbewusst formulierter, aber falscher oder erfundener Inhalte, durch die Nutzer in die Irre geführt werden können (NIST AI Risk Management Framework). Wichtig ist das Wort selbstbewusst: Das Modell signalisiert von sich aus keine Unsicherheit. Deshalb genügt es nicht, auf einen erkennbar zögerlichen Ton zu hoffen. Es braucht technische Vorkehrungen, die eine Antwort an belegbare Quellen binden und im Zweifel den Rückzug antreten.

Was eine Wissensbasis mit RAG verändert

Retrieval-Augmented Generation, kurz RAG, verbindet das Sprachmodell mit einer durchsuchbaren Wissensbasis. Statt eine Antwort allein aus dem allgemeinen Trainingswissen zu bilden, sucht das System zuerst die passenden Stellen in Ihren Inhalten heraus und lässt das Modell die Antwort auf dieser abgerufenen Grundlage formulieren. Der Ansatz geht auf die Arbeit von Lewis und Kolleginnen bei Meta AI Research zurück, die 2020 zeigten, dass ein solches Verfahren neue Bestwerte auf anspruchsvollen Wissensaufgaben erreichte, darunter 44,5 Punkte Exact Match in der offenen Fragebeantwortung von Natural Questions (Meta AI Research). Der Kern des Prinzips: Das Modell muss Fakten nicht auswendig können, es schlägt sie im Moment der Frage in einer verlässlichen Quelle nach.

Für die Antwortqualität ist der entscheidende Befund derselben Arbeit noch aussagekräftiger. Menschliche Prüfer bewerteten die quellengestützten Antworten in 42,7 Prozent der Fälle als sachlich korrekter, gegenüber nur 7,1 Prozent für ein vergleichbares Modell ohne Anbindung (Meta AI Research). Auch als konkreter und spezifischer galten die abgerufenen Antworten deutlich häufiger, in 37,4 Prozent gegenüber 16,8 Prozent der Fälle (Meta AI Research). Eine Anbindung an geprüfte Inhalte verringert also nicht nur erfundene Aussagen, sie macht die Antworten zugleich präziser. Wie wir diese Grundlage für Ihren Assistenten aufbauen und pflegen, beschreibt die Seite zur Wissensbasis.

Abruf statt Auswendiglernen

Das System sucht zur Frage die passenden Stellen in Ihren Inhalten und antwortet daraus, statt sich auf ein starres, im Training eingefrorenes Gedächtnis zu verlassen.

Antwort mit Kontext

Die abgerufenen Passagen liefern den Rahmen, in dem das Modell formuliert. So bleibt die Antwort an Ihr konkretes Angebot gebunden statt an allgemeines Weltwissen.

Aktualisierbar ohne Neutraining

Ändert sich ein Inhalt, wird die Quelle aktualisiert und der Assistent antwortet entsprechend, ohne dass ein ganzes Modell neu trainiert werden muss.

Quellenbindung: jede Antwort mit Beleg

Quellenbindung bedeutet, dass der Assistent seine Aussagen aus den freigegebenen Inhalten Ihres Unternehmens ableitet und nicht aus dem allgemeinen Weltwissen des Modells: aus der Website, dem Produktkatalog, der Preisliste, den FAQ und geprüften Dokumenten. Was dort nicht steht, wird nicht behauptet. Im Idealfall kann der Assistent zu einer Antwort auch die Herkunft nennen, etwa eine bestimmte FAQ oder den Katalogeintrag, sodass sich die Auskunft nachvollziehen und im Zweifel prüfen lässt. Aus einer Aussage, der man vertrauen muss, wird so eine Aussage, die man belegen kann.

Antworten, die sich prüfen lassen

Ein quellengebundener Assistent stützt jede relevante Aussage auf eine hinterlegte Stelle und kann deren Ursprung benennen. Das macht Antworten nachvollziehbar und erleichtert die Pflege, weil sich eine falsche Auskunft auf die zugrunde liegende Quelle zurückführen und dort korrigieren lässt, statt in einem undurchsichtigen Modell zu verschwinden.

Diese Bindung ist keine Kür, sondern eine anerkannte Schutzmaßnahme. Das NIST AI Risk Management Framework führt Konfabulation als eine von zwölf Risikokategorien für generative KI und benennt dazu mehr als 200 empfohlene Maßnahmen zur Beherrschung solcher Risiken (NIST AI Risk Management Framework). Die Bindung an geprüfte Quellen gehört zu den wirksamsten davon. Bei XICBOT legen wir pro Projekt fest, wie eng die Antworten an Ihre Inhalte gekoppelt sind und welche Bereiche der Assistent überhaupt beantworten darf. Wie er dabei nur klar definierte, freigegebene Aktionen ausführt, statt eigenmächtig zu handeln, zeigt der Beitrag zur Tool-Steuerung.

Konfidenz-Schwellen und Eskalation an Menschen

Auch mit einer Wissensbasis bleibt eine Restunsicherheit: Manchmal findet der Abruf keine gut passende Stelle, manchmal ist die Frage mehrdeutig, manchmal widersprechen sich zwei Quellen. Genau dafür gibt es Konfidenz-Schwellen. Vereinfacht gesagt bewertet das System, wie gut die abgerufenen Inhalte zur Frage passen und wie belastbar eine Antwort daraus wäre. Liegt dieser Wert über einer festgelegten Schwelle, antwortet der Assistent aus der Quelle. Liegt er darunter, antwortet er bewusst nicht auf gut Glück, sondern reicht das Anliegen weiter. So wird aus einem stillen Ratespiel eine kontrollierte Entscheidung.

Lieber abgeben als raten

Eine sinnvolle Grundregel lautet: Im Zweifel keine erfundene Antwort, sondern eine ehrliche Weitergabe. Das gilt besonders für heikle Themen wie Recht, Gesundheit, Verträge oder verbindliche Zusagen. Legen Sie vorab fest, welche Bereiche der Assistent eigenständig beantwortet und wo er grundsätzlich an einen Menschen übergibt. Eine zurückhaltende Schwelle kostet ein paar automatisch beantwortete Fragen, verhindert aber falsche Auskünfte, die später teuer werden.

Bei einer Übergabe geht der volle Gesprächskontext mit an eine Mitarbeiterin, ein Kontaktformular oder einen Rückruf, damit niemand seine Frage zweimal stellen muss. Das ist kein Eingeständnis von Schwäche, sondern ein Qualitätsmerkmal: Der Assistent kennt seine Grenzen und überschreitet sie nicht. Nicht ohne Grund ist ungenaue Ausgabe laut Erhebung das am häufigsten genannte Risiko beim Einsatz generativer KI (McKinsey). Wie eine saubere Übergabe rund um die Uhr funktioniert, ohne fachliche Grenzen zu überschreiten, beschreibt der Beitrag zum Support-Assistenten.

Wissenslücken zugeben statt raten

Ein ehrliches Ich weiß es nicht ist im Kundenkontakt mehr wert als eine selbstsichere Falschauskunft. Ein gut eingerichteter Assistent behandelt eine Wissenslücke deshalb nicht als Makel, den er kaschieren muss, sondern als Anlass, den nächsten hilfreichen Schritt anzubieten. Statt eine Rückgabefrist zu erfinden, sagt er, dass ihm dazu keine gesicherte Angabe vorliegt, und bietet an, die Frage an das Team weiterzugeben oder einen Rückruf zu vereinbaren. Die fragende Person bleibt nicht mit einer möglicherweise falschen Auskunft zurück, sondern auf einem verlässlichen Weg zur richtigen Antwort.

Die verlässlichste Antwort auf eine offene Frage ist nicht die schnellste Erfindung, sondern der ehrliche Hinweis auf die Lücke und der Weg zu einem Menschen, der sie schließen kann.

SituationGenerisches Modell ohne BindungQuellengebundener XICBOT-Assistent
Frage außerhalb der InhalteFormuliert eine plausibel klingende VermutungWeist auf die Wissenslücke hin und gibt ab
Preis oder Frist unklarNennt einen erfundenen WertAntwortet nur aus hinterlegter Quelle oder fragt nach
Widersprüchliche AngabenWählt willkürlich eine VarianteMeldet die Unsicherheit, statt sie zu verdecken
Heikles ThemaAntwortet ohne AbsicherungÜbergibt bewusst an einen Menschen
Herkunft der AntwortNicht nachvollziehbarAuf eine benennbare Quelle zurückführbar

Welche Fragen häufig ins Leere laufen, ist zugleich eine wertvolle Information. Jede erkannte Wissenslücke zeigt, wo Inhalte fehlen oder unklar formuliert sind. Die anonymisierte Gesprächsanalyse macht diese Muster sichtbar, sodass sich die Wissensbasis gezielt dort ergänzen lässt, wo Besucher tatsächlich Antworten suchen. Aus einer Lücke wird so eine konkrete Aufgabe für die Pflege, statt einer stillen Fehlerquelle.

Aktualität: eine Wissensbasis, die mitwächst

Selbst eine perfekt gebundene Antwort ist wertlos, wenn die zugrunde liegende Quelle veraltet ist. Ein Preis von gestern, eine abgelaufene Aktion oder eine geänderte Öffnungszeit werden sonst korrekt aus der Quelle wiedergegeben und sind trotzdem falsch. Hier spielt RAG seine zweite große Stärke aus: Weil das abrufbare Wissen getrennt vom Sprachmodell liegt, lässt es sich aktualisieren, ohne das Modell neu zu trainieren (Meta AI Research). Sie pflegen die Inhalte an einer Stelle, und der Assistent antwortet ab sofort auf dem neuen Stand.

In der Praxis heißt das, die Wissensbasis regelmäßig mit den lebenden Quellen abzugleichen: der Website, dem Shop-Katalog, den Preisen und den Dokumenten. Ebenso wichtig ist das Gegenstück, nämlich überholte Inhalte auszusortieren, damit der Assistent nicht aus einer alten Version antwortet. Bei XICBOT gehören dieser Abgleich, die Pflege und das Hosting in Deutschland zum laufenden Leistungsumfang, sodass die Grundlage aktuell bleibt, ohne interne Ressourcen zu binden. Wie sich der Assistent technisch an Ihre bestehenden Systeme anbinden lässt, beschreibt der Beitrag zur Integration.

  • Website, Shop und Dokumente regelmäßig mit der Wissensbasis abgleichen
  • Überholte Inhalte aktiv aussortieren, statt sie liegen zu lassen
  • Preise, Fristen und Verfügbarkeiten als besonders zeitkritisch behandeln
  • Erkannte Wissenslücken aus der Gesprächsanalyse gezielt schließen
  • Für heikle Bereiche feste Grenzen und eine Übergabe an Menschen setzen
  • Antworten stichprobenartig gegen die hinterlegte Quelle prüfen

Grenzen: auch mit Wissensbasis kein Selbstläufer

Eine Wissensbasis mit Quellenbindung senkt das Risiko erfundener Fakten erheblich, aber sie hebt es nicht vollständig auf. Das lässt sich an der bereits genannten Untersuchung ablesen: Selbst spezialisierte, an Fachdatenbanken angebundene Recherchewerkzeuge lieferten in mindestens einer von sechs anspruchsvollen Anfragen eine falsche oder schlecht belegte Antwort (Stanford HAI). Die Ursachen sind bekannt: Der Abruf findet die falsche Stelle, eine Frage ist mehrdeutig, zwei Quellen widersprechen sich, oder die Inhalte selbst enthalten einen Fehler. Wer verspricht, ein System sei dadurch unfehlbar, verkennt die Technik.

Kein System ist unfehlbar

Eine lückenlose Richtigkeit lässt sich nicht zusichern. Genau deshalb sind Quellenbindung, Konfidenz-Schwellen und die Übergabe an Menschen kein Beiwerk, sondern zusammengehörige Sicherungen. Sie sorgen dafür, dass die verbleibenden Unsicherheiten früh auffallen und an der richtigen Stelle landen, statt unbemerkt als selbstsichere Falschauskunft an Kundinnen und Kunden zu gehen.

Gute Ergebnisse entstehen deshalb aus dem Zusammenspiel mehrerer Vorkehrungen: sauber gepflegte Quellen, ein klar abgegrenzter Zuständigkeitsbereich, laufende Beobachtung der Gespräche und eine menschliche Aufsicht für heikle Fälle. Zur Verlässlichkeit gehört auch Transparenz gegenüber den Nutzern. Warum ein KI-Assistent sich als solcher zu erkennen geben sollte, ordnet unser Beitrag zur Kennzeichnungspflicht nach dem EU AI Act ein. Und dass verlässliche Antworten für alle nutzbar sein müssen, behandelt der Beitrag zum barrierefreien KI-Assistenten.

So bauen wir Ihre Wissensbasis auf

Am Anfang steht eine Bestandsaufnahme Ihrer Inhalte: Website, Shop, Preise, FAQ und Dokumente werden gesichtet und zu einer strukturierten Wissensbasis zusammengeführt. Anschließend legen wir fest, wie eng die Antworten an diese Quellen gebunden sind, welche Bereiche der Assistent eigenständig beantwortet und ab welcher Konfidenz er an einen Menschen übergibt. Für Betriebe mit erhöhtem Schutzbedarf lässt sich das mit europäischen oder self-hosted Sprachmodellen und einem Hosting in Deutschland kombinieren, wie es der Beitrag zu Datenschutz und Hosting beschreibt. So entsteht ein Assistent, der aus Ihren Inhalten antwortet und bei Unsicherheit den Rückzug antritt.

Der Einstieg gelingt meist über einen Website-Assistenten, der Fragen aus Ihrer Wissensbasis beantwortet und Kontakte erfasst, und lässt sich später um Shop-, Termin- und Aktionsfunktionen erweitern. Weil dieselbe Wissensbasis mehrere Sprachen bedient, antwortet der Assistent konsistent, auch wenn Besucher in ihrer eigenen Sprache fragen, wie der Beitrag zum mehrsprachigen Assistenten zeigt. Wie sich ein individuell trainierter Assistent grundsätzlich von einem Baukasten-Bot unterscheidet, vertieft der Vergleich individueller Assistent gegenüber Standard-Chatbot. Welches Paket zu Ihrem Vorhaben passt, zeigt die Preisübersicht.

Quellen und Studien

Dieser Artikel stützt sich auf: Stanford HAI (AI Index Report sowie die RegLab-Studie Hallucination-Free? von Magesh und Kolleginnen zu Halluzinationsraten quellengestützter Recherchetools), Meta AI Research (Lewis und Kolleginnen, Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks, zu Bestwerten und Faktentreue quellengestützter Antworten), das NIST AI Risk Management Framework (Generative AI Profile, Definition von Konfabulation sowie Risikokategorien und Maßnahmen) und McKinsey (The State of AI, ungenaue Ausgabe als häufigstes Risiko und negative Folgen generativer KI) sowie eigene Projekterfahrung. Die genannten Werte können je nach Studie, Modell und Zeitpunkt abweichen; ein KI-Assistent kann irren, weshalb Quellenbindung, Konfidenz-Schwellen und die Übergabe an Menschen zentral sind.