Merlin MechlerMERLIN MECHLER
Alle Artikel
8 Min Lesezeit

Wenn dieselbe Frage zwei richtige Antworten hat

Mehrdeutige Fragen an Wissensassistenten prüfen: Geltungsbereiche unterscheiden, gezielt nachfragen und Varianten korrekt belegen.

KI im TeamArbeitsqualitätPraxis

Zwei unterschiedliche Antworten auf dieselbe Frage sind nicht automatisch ein KI-Fehler. Eine Frage kann mehrere Produkte, Zeitstände oder Vertragsvarianten meinen. Dann sind beide Antworten in ihrem jeweiligen Geltungsbereich richtig. Der Fehler entsteht, wenn ein Wissensassistent eine Variante auswählt, ohne die fehlende Unterscheidung offenzulegen.

Für einen brauchbaren Antwortprozess muss die Wissensbasis deshalb mehr enthalten als einzelne Sätze. Sie braucht Angaben darüber, für wen, für welchen Zeitraum und unter welchen Bedingungen eine Aussage gilt. Dieser Artikel entwickelt einen eigenen Prüf- und Rückfragepfad. Alle Produktbezeichnungen und Servicefälle im Beispiel sind fiktiv.

Unterscheide Mehrdeutigkeit von Widerspruch

Ein Widerspruch liegt vor, wenn zwei Quellen für denselben Gegenstand, denselben Zeitraum und dieselbe Bedingung unvereinbare Aussagen enthalten. Mehrdeutigkeit liegt vor, wenn die Frage diese Bedingungen noch nicht festlegt. Diese Unterscheidung entscheidet über den nächsten Schritt: Bei Mehrdeutigkeit hilft eine gezielte Rückfrage. Bei einem echten Quellenwiderspruch muss die zuständige Stelle die Regel klären.

Die Frage "Wie lange gilt die Freigabe?" enthält ohne Kontext kaum verwertbare Grenzen. Sie kann sich auf einen Testzugang, eine interne Bestellung oder einen Wartungsschritt beziehen. Selbst innerhalb eines Produkts können verschiedene Versionen andere Regeln haben. Ein flüssiger Antwortsatz verdeckt diese Lücke, wenn er keine Bedingung nennt.

Prüfe daher zuerst, ob sich die abweichenden Aussagen auf denselben Fall beziehen. Erst danach bewertest du ihre inhaltliche Vereinbarkeit. Der Beitrag Widersprüchliche Quellen mit KI prüfen behandelt den Fall, in dem die Geltungsbereiche tatsächlich übereinstimmen. Hier geht es um die Auswahl zwischen mehreren gültigen Varianten.

Was die Forschung zu mehrdeutigen Fragen zeigt

Die Forschungsarbeit AmbigQA: Answering Ambiguous Open-domain Questions untersucht mehrdeutige Fragen in der offenen Wissenssuche. Min und Mitautoren beschreiben die Aufgabe, plausible Antworten zu finden und die Frage für jede Antwort eindeutig umzuformulieren. Der Datensatz enthält unter anderem Mehrdeutigkeiten bei Ereignissen und Entitäten.

Die Untersuchung belegt keine Häufigkeit solcher Fälle in deiner internen Wissensdatenbank. Ihr Nutzen für diesen Artikel ist begrifflich: Eine Frage kann mehrere sinnvolle Lesarten haben. Die folgenden Produkt- und Prozessregeln sind eine eigene Übertragung auf betriebliche Wissensarbeit. Ob sie deine Fälle abdecken, muss ein Test mit tatsächlichen Nutzerfragen zeigen.

Ein fiktiver Fall mit zwei gültigen Fristen

Ein Unternehmen verwendet die Produktvarianten Atlas Basis und Atlas Plus. In den erfundenen Unterlagen gilt für einen bestimmten internen Freigabeschritt bei Basis eine Frist von sieben Tagen und bei Plus eine Frist von vierzehn Tagen. Beide Dokumente sind aktuell und freigegeben. Eine Person fragt: "Wie lange ist die Atlas-Freigabe gültig?"

Die Antwort "vierzehn Tage" ist für Plus richtig und für Basis falsch. Die Antwort "sieben bis vierzehn Tage" ist ebenfalls unzureichend, weil sie die Auswahlbedingung verschweigt. Ein Mittelwert von zehneinhalb Tagen ist fachlich unsinnig. Das System muss die Produktvariante klären oder beide Regeln mit ihren Bedingungen zeigen.

Eine passende Rückfrage lautet: "Geht es um Atlas Basis oder Atlas Plus? Die Frist unterscheidet sich zwischen diesen Varianten." Wenn die Person die Variante nicht kennt, nennt der Assistent den freigegebenen Weg zur Ermittlung. Er darf nicht die häufiger verwendete Variante als stillen Standard wählen, solange der Arbeitsprozess diese Voreinstellung nicht ausdrücklich erlaubt.

Welche Metadaten eine Antwort begrenzen

Für den fiktiven Fall reichen Produktvariante, Regelversion und Gültigkeitszeitraum. In anderen Aufgaben sind Standort, Zielgruppe oder Prozessstatus relevant. Sammle nicht vorsorglich jede denkbare Eigenschaft. Leite die notwendigen Merkmale aus den Entscheidungen ab, die tatsächlich zu verschiedenen Antworten führen.

MerkmalWarum es die Antwort verändertVerhalten bei fehlender Angabe
ProduktvarianteUnterschiedliche freigegebene FristenVariante erfragen
GültigkeitszeitraumNeue Regel ersetzt frühere Fassung ab einem ZeitpunktZeitbezug klären
ProzessstatusEntwurf und freigegebener Vorgang folgen verschiedenen RegelnStatus aus erlaubter Quelle prüfen
GeltungsbereichRegel gilt nur für eine benannte GruppeBereich erfragen oder Antwort begrenzen
QuellenstatusEntwurf ist keine gültige ArbeitsregelNicht als verbindliche Antwort verwenden

Diese Tabelle ist ein eigenes Strukturmuster. Die tatsächlich nötigen Felder legt die fachlich verantwortliche Person fest. Ein Metadatenfeld hilft nur, wenn es korrekt gepflegt wird. Eine falsch zugeordnete Variante kann eine formal sauber gefilterte, aber inhaltlich falsche Antwort erzeugen. Deshalb gehört die Zuordnung selbst in die Prüfung.

Ein Rückfragepfad mit klarer Stoppregel

Beginne mit der Frage, ob der vorhandene Kontext die Variante bereits eindeutig festlegt. Wenn ein berechtigter Vorgang ausdrücklich Atlas Basis nennt, ist eine zusätzliche Rückfrage unnötig. Wenn die Zuordnung nur aus einem ähnlichen Namen vermutet wird, bleibt sie offen. Der Assistent muss zwischen belegtem Kontext und einer wahrscheinlichen Annahme unterscheiden.

Fehlt genau ein Merkmal, frage gezielt danach. Fehlen mehrere Merkmale, beginne mit demjenigen, das die Antwortmenge am stärksten und verständlichsten eingrenzt. Das ist ein praktischer Vorschlag, keine universelle Optimierungsregel. Eine Rückfrage nach fünf internen Codes überfordert Nutzer, wenn sie nur den sichtbaren Produktnamen kennen.

Wenn die Person die nötige Information nicht liefern kann, endet der automatische Antwortpfad an dieser Stelle. Der Assistent zeigt die Bedingungen und nennt den zuständigen Klärungsweg. Er gibt keine endgültige Handlungsanweisung für einen unbestimmten Fall. Die Grenzen dieses Verhaltens ergänzt Antwortgrenzen eines Wissensassistenten.

Wann mehrere Antworten gemeinsam sinnvoll sind

Für eine vergleichende Frage sind mehrere Antworten ausdrücklich erwünscht. "Wie unterscheiden sich Basis und Plus?" verlangt eine Gegenüberstellung. Auch bei einer ersten Orientierung kann eine kurze Tabelle mit beiden Varianten hilfreich sein. Die Bedingungen müssen direkt neben der jeweiligen Aussage stehen, nicht versteckt in einer Fussnote.

Für eine konkrete Ausführung reicht eine solche Übersicht dagegen oft nicht. Wenn eine Person einen Vorgang abschliessen will, muss die zutreffende Variante feststehen. Die Übersicht unterstützt die Auswahl, ersetzt sie aber nicht. Der Assistent muss klar kennzeichnen, ob er informiert oder eine konkrete Regel auf einen bestimmten Vorgang anwendet.

Im Beispiel lautet die vergleichende Antwort: "Basis: sieben Tage laut Regel B. Plus: vierzehn Tage laut Regel P. Für deinen Vorgang fehlt noch die Variante." Damit bleiben die Aussagen nachvollziehbar. Es entsteht keine scheinbar einheitliche Frist. Die Quellenangaben führen jeweils zur passenden Regel, nicht nur zur Startseite der Wissensdatenbank.

Prüfe besonders die scheinbar eindeutigen Fragen

Ein Testbestand braucht nicht nur offensichtlich unklare Fragen. Gerade kurze Alltagsformulierungen wirken oft eindeutig, weil Menschen stillen Kontext ergänzen. "Ist das noch gültig?" kann sich auf das zuletzt besprochene Dokument oder auf einen neuen Anhang beziehen. Ein Assistent muss prüfen, welcher Bezug tatsächlich verfügbar ist.

Erstelle deshalb Varianten derselben Frage mit und ohne Produktangabe. Ergänze einen veralteten Zeitbezug und einen Fall mit widersprüchlicher Zuordnung. Definiere vorab, wann eine direkte Antwort, eine Rückfrage oder eine Eskalation erwartet wird. Die Bewertung darf nicht allein auf dem enthaltenen Zahlenwert beruhen. Auch die richtige Bedingung gehört zur korrekten Antwort.

Ein Testfall mit Atlas Basis besteht beispielsweise nur, wenn die Antwort sieben Tage nennt und die passende Quelle verwendet. Der unbestimmte Atlas-Fall besteht nur, wenn die Variante geklärt oder die Antwort ausdrücklich bedingt dargestellt wird. Eine zufällig richtige Auswahl ohne Begründung ist kein verlässlicher Erfolg.

Bewerte Antwort und Auswahlentscheidung getrennt

Für die Prüfung empfehle ich zwei Felder: Hat das System den richtigen Geltungsbereich erkannt? Hat es innerhalb dieses Bereichs die richtige Aussage geliefert? Diese Trennung zeigt, ob ein Fehler aus der Quellenauswahl oder aus der Formulierung stammt. Beide Ursachen brauchen unterschiedliche Korrekturen.

Ein korrekt ausgewähltes Dokument kann falsch zusammengefasst werden. Umgekehrt kann eine sauber zitierte Aussage aus dem falschen Produktdokument stammen. Ein Quellenlink allein beweist deshalb keine richtige Antwort. Prüfe, ob die Quelle den konkreten Fall abdeckt und ob die Antwort ihre Bedingungen erhält.

Die praktische Arbeit mit Testfragen beschreibt Wissensdatenbanken mit Nutzerfragen prüfen. Ergänze dort ausdrücklich Fälle, in denen mehrere Antworten jeweils richtig sind. Diese Fälle verhindern, dass die Bewertung nur auf eine einzige Musterformulierung zugeschnitten wird und sinnvolle Rückfragen als Fehler zählt.

Halte historische Regeln erreichbar, aber erkennbar

Eine alte Regel kann für einen früheren Vorgang weiterhin relevant sein. Sie muss deshalb nicht aus jeder Suche verschwinden. Ihr Zeitbezug muss jedoch sichtbar sein. Wenn das System eine historische Frage beantwortet, braucht es die damals gültige Regel. Für einen neuen Vorgang gilt dagegen der aktuelle, fachlich freigegebene Stand.

Trenne Veröffentlichungsdatum und Gültigkeitsbeginn, wenn sie auseinanderfallen. Ein heute veröffentlichtes Dokument kann eine Regel für den nächsten Monat beschreiben. Die Auswahl nach dem jüngsten Dateidatum allein ist dann falsch. Welche Zeitangabe entscheidet, muss der Fachbereich festlegen und in der Wissensbasis dokumentieren.

Die technische Pflege ergänzt KI-Wissensdatenbanken aktualisieren. Der fachliche Test bleibt: Beantwortet das System denselben Satz für zwei unterschiedliche Zeitpunkte jeweils mit der passenden Bedingung? Erst dieser Vergleich zeigt, ob die Variantenlogik tatsächlich funktioniert.

Vermeide Rückfragen nach bereits bekannten Angaben

Ein Assistent, der bei jeder Frage dieselben Produktdaten erneut verlangt, erschwert die Arbeit. Prüfe deshalb, welche Informationen der aktuelle Vorgang bereits zuverlässig enthält. Belegter Kontext darf genutzt werden, sofern der Zugriff erlaubt ist und die Information zum fraglichen Fall gehört. Eine Angabe aus einem anderen Gespräch ist nicht automatisch auf den neuen Vorgang übertragbar.

Zeige bei einer direkten Antwort den verwendeten Bezug knapp an. Im Beispiel kann die Antwort mit "Für Atlas Basis" beginnen. Die Person erkennt dadurch eine falsche Zuordnung, bevor sie die Frist übernimmt. Diese sichtbare Bedingung ist auch bei korrekter automatischer Auswahl hilfreich. Sie macht die Entscheidung des Systems kontrollierbar.

Wenn die Person den Bezug korrigiert, muss der Assistent die Antwort neu anhand der passenden Quelle bilden. Ein blosses Austauschen des Produktnamens reicht nicht. Die Frist und alle zugehörigen Bedingungen müssen ebenfalls geprüft werden. Nimm deshalb einen solchen Wechsel in den Testbestand auf: zunächst Basis, dann eine ausdrückliche Korrektur auf Plus.

Dokumentiere, ob die Korrektur nur für die aktuelle Antwort oder für den ganzen Vorgang gilt. Diese Zustandsregel muss zum verwendeten System passen. Ohne sie kann eine einmalige Rückfrage unbeabsichtigt spätere Antworten beeinflussen. Der Artikel schlägt diese Prüfung vor; er behauptet keine einheitliche Speicherlogik aller Chatprodukte.

Eine Abnahme mit drei unterschiedlichen Ergebnissen

Lasse die zuständige Person zum Abschluss einen eindeutigen, einen mehrdeutigen und einen widersprüchlichen Fall prüfen. Beim eindeutigen Fall muss der Assistent die zutreffende Regel belegen. Beim mehrdeutigen Fall muss er die fehlende Unterscheidung sichtbar machen. Beim Widerspruch muss er die fachliche Klärung verlangen, statt eine Variante als scheinbar richtig auszuwählen.

Diese Abnahme prüft den Umgang mit Grenzen, nicht nur die Fähigkeit zu antworten. Dokumentiere, welche Merkmale für die Auswahl verwendet wurden und welche Quellen die Antwort tragen. Wenn ein Merkmal fehlt, bleibt der Fall offen. Eine nachvollziehbare Rückfrage ist dann das richtige Arbeitsergebnis und kein Zeichen für eine unvollständige Wissensbasis.

Nächster Schritt

Welche Arbeit kostet in deinem Unternehmen heute zu viel Zeit?

Die KI-Mitarbeiter-Fit-Prüfung zeigt, ob ein KI-Mitarbeiter wiederkehrende operative Arbeit in eurem Prozess übernehmen kann. Du bekommst eine klare Antwort, kein Tool-Pitch.

5 Fragen · etwa 3 Minuten · klare Fit-Einschätzung