Veraltete Dokumente in der KI-Wissensdatenbank erkennen und ersetzen

Eine KI-Wissensdatenbank ist nach einer Dateiänderung erst dann fachlich aktualisiert, wenn die Anwendung den neuen freigegebenen Stand verwendet und den alten Stand nicht mehr als aktuell ausgibt. Dafür müssen Fachbereich und Technik denselben Änderungsfall bis zur Antwortprüfung verfolgen.

Diese Anleitung beschreibt den Ablauf an einer fiktiven Serviceinformation. Sie setzt keinen bestimmten Anbieter voraus. Das Beispiel enthält Soll-Ergebnisse für deine Tests. Ein tatsächlich durchgeführter Systemtest wird hier nicht behauptet.

Aktualität entsteht auf mehreren Ebenen

Zwischen einer Quelldatei und einer KI-Antwort liegen mehrere mögliche Zustände. Das Fachsystem enthält den freigegebenen Inhalt. Ein Import übernimmt ihn. Ein Suchbestand macht ihn auffindbar. Die Anwendung wählt daraus Passagen und formuliert eine Antwort. Zusätzlich kann eine Unterhaltung noch ältere Inhalte enthalten. Eine Änderung muss deshalb entlang des tatsächlichen Datenwegs geprüft werden.

Ein häufiges Missverständnis lautet: "Die Datei wurde ersetzt, also kennt die KI den neuen Stand." Diese Aussage ist nur dann richtig, wenn der konkrete Übernahmeweg und die Antwortprüfung das bestätigen. Eine Anwendung, die aus einem separaten Suchindex arbeitet, kann weiterhin einen früheren Stand verwenden. Umgekehrt kann der Index richtig sein, während die Antwort einen Gültigkeitszeitraum falsch interpretiert.

Lege für jede Ebene fest, welcher Nachweis verfügbar ist. Der Freigabevermerk belegt die fachliche Gültigkeit. Der Importstatus belegt einen technischen Verarbeitungsschritt. Ein Suchergebnis zeigt die Auffindbarkeit. Eine geprüfte Antwort zeigt das Verhalten bei einer bestimmten Frage. Diese Nachweise beantworten verschiedene Fragen und müssen zusammenpassen.

Was Forschungsarbeiten zur Quellenbindung beitragen

Der ALCE-Beitrag von Gao und Kollegen untersucht Antworten mit Quellenbelegen und trennt deren Richtigkeit von der Qualität der Belege. Daraus leite ich für die Aktualisierung eine eigene Prüfregel ab: Eine Antwort muss den richtigen Inhalt und den richtigen Quellstand nennen. Der Benchmark aus 2023 bewertet keine betriebliche Versionsverwaltung und liefert keine aktuelle Fehlerquote deiner Anwendung.

Sculley und Kollegen beschreiben in Hidden Technical Debt, 2015 Abhängigkeiten und Wartungsprobleme in ML-Systemen, die über den Modellcode hinausreichen. Der Beitrag beruht auf Systemerfahrung, nicht auf einer Untersuchung deines Wissensassistenten. Für diesen Ablauf ist der Blick auf Datenabhängigkeiten hilfreich: Eine Quellenänderung betrifft möglicherweise mehrere Suchbestände und Anwendungen. Die folgende Änderungsmatrix ist meine praktische Ableitung daraus.

Eine Änderungsmatrix statt einer losen Dateiliste

Wenn dein Werkzeug eine Ebene nicht offenlegt, markiere sie als nicht direkt prüfbar. Die Antwortprüfung gewinnt dann an Bedeutung, ersetzt aber keine unbekannte Zugriffskontrolle. Beschreibe die verbleibende Unsicherheit im Betriebsblatt.

Erkenne, welche Art von Änderung vorliegt

Eine neue Telefonnummer, ein korrigierter Serviceumfang und eine zurückgezogene Arbeitsanweisung brauchen unterschiedliche Prüfungen. Halte zuerst fest, welche Aussage sich ändert, ab wann sie gilt und wer sie freigibt. Das Dateidatum allein beantwortet diese Fragen nicht.

Die fachliche Verantwortung liegt bei der Person, die den Inhalt beurteilen und freigeben darf. Die technische Verantwortung betrifft Übernahme, Indexierung, Suchergebnis und Zugriffssteuerung. Eine erfolgreiche technische Übernahme macht einen ungeprüften Inhalt nicht fachlich gültig.

Beginne mit einem Änderungsblatt: Dokumentkennung, bisherige Version, neue Version, Gültigkeitsbeginn, Freigabestatus, betroffene Fragen und zuständige Rollen. Das Blatt verbindet den Anlass mit der späteren Antwortprüfung. Ohne diese Verbindung bleibt bei einer falschen Antwort offen, ob die Quelle, die Suche oder die Antworterzeugung das Problem verursacht.

Fiktives Beispiel: Servicefenster ändern

Solange v2 keine Freigabe hat, darf die Anwendung daraus keine bestätigte neue Servicezusage ableiten. Die korrekte Reaktion auf eine Frage zum November ist in diesem Übungsschritt ein Hinweis auf den offenen Freigabestand. Sie muss die zuständige Rolle zur Klärung nennen.

Im zweiten Übungsschritt erhält v2 die dokumentierte Freigabe. Nun muss eine Frage zum 03.11.2026 das Fenster 8 bis 16 Uhr erhalten. Eine historische Frage zum 15.10.2026 braucht dagegen den damaligen Stand 8 bis 17 Uhr, sofern historische Auskünfte Teil des freigegebenen Anwendungsumfangs sind.

Finde alle betroffenen Quellen

Suche nach der Dokumentkennung und der alten Aussage. Prüfe neben dem Hauptdokument auch FAQ-Seiten, eingebundene Anhänge und Kopien in anderen Ablagen. Eine korrekte neue Datei hilft wenig, wenn eine zweite Quelle denselben Service weiterhin bis 17 Uhr beschreibt.

Erfasse für jede Fundstelle, ob sie ersetzt, archiviert oder weiter benötigt wird. Historische Unterlagen brauchen einen sichtbaren Gültigkeitszeitraum. Falls die Anwendung nur aktuelle Auskünfte unterstützt, gehören alte Stände nicht in ihren aktiven Suchbestand. Aufbewahrung und Suchverfügbarkeit sind unterschiedliche Entscheidungen.

Achte auch auf zusammengesetzte Antworten. Eine aktuelle Kontaktseite und ein alter PDF-Anhang können zusammen eine scheinbar stimmige, aber falsche Auskunft erzeugen. Der Test muss deshalb die gefundenen Quellen und deren Kombination betrachten.

Aktualisierung technisch nachvollziehen

Die konkrete Technik hängt von der Anwendung ab. Bei einem Suchindex muss die neue Fassung übernommen und der Umgang mit dem alten Eintrag festgelegt werden. Bei einer Anwendung mit hochgeladenen Wissensdateien muss der verantwortliche Betreiber prüfen, welche Dateien weiterhin aktiv sind. Ein blosses Umbenennen im ursprünglichen Ordner beweist keine Änderung im Zielsystem.

Microsoft dokumentiert für Azure AI Search getrennte Aktionen für das Hinzufügen, Ändern und Entfernen von Indexdokumenten. Die Dokumentation beschreibt zudem eine verzögerte Suchverfügbarkeit während der Verarbeitung. Für dieses konkrete Produkt folgt daraus: Ein erfolgreicher Schreibaufruf ersetzt nicht die anschliessende Suchprüfung. Andere Produkte brauchen ihren eigenen technischen Nachweis.

Halte den Übernahmezeitpunkt, den Zielbestand und den Status der betroffenen Dokumente fest. Prüfe mit einer normalen Nutzerrolle. Ein Test mit erweiterten Administratorrechten beantwortet die Frage nach der späteren Nutzeransicht nicht.

Testfragen mit vorher festgelegten Antworten

Diese Tabelle ist ein Lösungsschlüssel für das Beispiel. Ergänze bei deiner Anwendung weitere Schreibweisen und typische Nutzerfragen. Eine richtige Antwort auf die Dokumentkennung allein reicht nicht, wenn Kollegen nach "Erreichbarkeit" oder "Hotline-Zeit" suchen.

Speichere Frage, Nutzerrolle, Zeitpunkt, Antwort und zitierte Fundstelle. Bei einer falschen Antwort prüfst du zuerst den tatsächlich gefundenen Quellstand. Danach klärst du, ob die Antwort trotz richtiger Quelle die falsche Zeit übernommen hat. So trennst du Suchfehler und Antwortfehler.

Gültigkeitszeit und Änderungszeit nicht verwechseln

Das Datum einer Dateiänderung sagt, wann jemand gespeichert hat. Der Gültigkeitsbeginn sagt, ab wann die fachliche Regel anzuwenden ist. Eine am 21. Oktober gespeicherte Serviceinformation kann erst am 1. November gelten. Ein System, das immer das zuletzt geänderte Dokument bevorzugt, beantwortet deshalb möglicherweise Fragen zum Oktober falsch.

Im Beispiel muss jede relevante Aussage einen fachlichen Zeitraum besitzen. Für v1 endet er am 31. Oktober einschliesslich; v2 beginnt am 1. November. Wenn eine Frage kein Datum enthält, braucht die Anwendung eine festgelegte Regel zum Bezugstag oder eine Rückfrage. Die KI darf diese Geschäftsregel nicht bei jeder Antwort neu erfinden.

Historische Auskünfte benötigen zusätzlich die damalige Quellenlage. Wenn dein System nur aktuelle Informationen bereitstellt, muss es historische Fragen als ausserhalb seines Umfangs behandeln. Ein Archiv allein macht noch keine verlässliche historische Suche. Der fachliche Umfang entscheidet, welche Bestände aktiv durchsuchbar bleiben.

Widersprüchliche Quellen gezielt behandeln

Nimm eine fiktive FAQ-Seite hinzu, die weiterhin Service bis 17 Uhr nennt und keinen Versionsstand besitzt. Nach Freigabe von SERVICE-07 v2 existiert damit ein Konflikt. Der richtige nächste Schritt ist eine fachliche Bereinigung oder eine ausdrücklich dokumentierte Quellenhierarchie. Eine Quellenhierarchie muss von der verantwortlichen Stelle stammen; die Anwendung darf sie nicht aus Dateinamen ableiten.

Bis zur Klärung muss die betroffene Auskunft den Konflikt sichtbar machen oder an den festgelegten manuellen Ansprechpartner verweisen. Eine Mehrheitsentscheidung nach der Anzahl gleichlautender Dokumente ist ungeeignet: Mehrere Kopien einer alten Information werden dadurch nicht gültiger.

Prüfe ausserdem, ob Zusammenfassungen oder Arbeitsvorlagen den alten Inhalt enthalten. Eine aktualisierte Wissensdatei korrigiert keine bereits versendete Antwort und keine manuell kopierte Anleitung. Der Änderungsumfang muss solche Folgeartefakte ausdrücklich berücksichtigen.

Einen kontrollierten Vergleich vor und nach der Änderung durchführen

Speichere vor der Aktualisierung die Antworten auf deine festgelegten Testfragen. Nach der Änderung führst du dieselben Fragen in einer neuen Unterhaltung mit derselben vorgesehenen Rolle aus. So wird sichtbar, ob sich die Antwort wie erwartet geändert hat. Ein neuer Chat verringert die Gefahr, dass ein alter Gesprächskontext den Vergleich überlagert; die tatsächliche Kontextverwaltung bleibt produktabhängig.

Prüfe danach eine fortgesetzte Unterhaltung separat. Ein Mitarbeiter arbeitet möglicherweise in einem bestehenden Verlauf weiter. Das Verhalten in einer frischen Sitzung beweist nicht automatisch, dass alte Gesprächsinhalte korrekt eingeordnet werden. Wenn das Produkt diese Situation nicht zuverlässig behandelt, muss die Arbeitsanweisung einen neuen Vorgang oder eine explizite Aktualitätsprüfung verlangen.

Ergänze Fragen, deren Antwort unverändert bleiben muss. Im Servicebeispiel betrifft die Änderung die Zeit, nicht automatisch Telefonnummer oder Zuständigkeit. Ein Test, der nur nach der geänderten Uhrzeit fragt, übersieht unbeabsichtigte Verluste anderer Angaben.

Pflege anhand von Änderungen und Fehlerfolgen planen

Eine feste monatliche Durchsicht allein reicht nicht, wenn eine fachliche Änderung bereits morgen gilt. Lege einen Meldeweg fest, über den die Dokumentenverantwortung Änderungen vor dem Gültigkeitsbeginn an den Betrieb übergibt. Die regelmässige Durchsicht ergänzt diesen ereignisbezogenen Weg und findet nicht gemeldete Altstände.

Priorisiere Quellen nach ihrer Nutzung und den Folgen einer falschen Auskunft. Eine selten gelesene, unverbindliche Hintergrundnotiz braucht andere Kontrollen als eine aktuelle Servicezusage. Die Priorität ist eine betriebliche Entscheidung und muss nachvollziehbar dokumentiert sein.

Für die Auswertung erfasst du offene Änderungsfälle, überfällige Prüfungen und bestätigte Fehlantworten. Verwechsle wenige Meldungen nicht mit fehlerfreiem Betrieb. Ohne sichtbaren Rückmeldeweg bleiben Fehler möglicherweise unbemerkt. Der Artikel zur Betriebsübergabe beschreibt, wer diesen Weg übernimmt.

Wann die Änderung abgeschlossen ist

Die Änderung ist für den definierten Umfang abgeschlossen, wenn die fachliche Freigabe vorliegt, der Zielbestand geprüft ist und die festgelegten Antworttests bestanden sind. Die Aussage gilt für diese Fragen und Rollen. Sie garantiert keine Fehlerfreiheit bei jeder künftigen Formulierung.

Wenn alte und neue Aussagen unkontrolliert nebeneinander erscheinen, bleibt die betroffene Auskunft eingeschränkt. Benenne einen manuellen Ansprechpartner, bis die Ursache behoben ist. Eine Betriebsübergabe muss diesen Störungsweg festhalten.

Prüfe nach einer Rechteänderung auch mit der betroffenen Nutzerrolle. Ein Administrator kann eine neue Quelle finden, obwohl der eigentlichen Zielgruppe der Zugriff fehlt. Umgekehrt muss eine entzogene Berechtigung bei dieser Rolle wirksam sein. Nutze dafür freigegebene Testkonten und fiktive Inhalte. Halte Suchergebnis und Antwort getrennt fest, denn die Sichtbarkeit im Suchindex beantwortet noch nicht jede Frage zur Ausgabe im Assistenten.

Quelle und nächste Schritte

Die technische Primärquelle zu Azure AI Search wurde am 21.10.2026 geprüft. Das Servicebeispiel und die Testfragen sind eigene redaktionelle Arbeitsmittel. Für den anfänglichen Aufbau beschreibt die KI-Wissensdatenbank Quellen und Rechte. Der Dokumentenvergleich hilft beim fachlichen Abgleich zweier Stände; die Versionierung der Arbeitsvorlage sichert den Prüfablauf.