Welche Version Ihres Unternehmens kennt Ihre KI? Welche Version Ihres Unternehmens kennt Ihre KI?

Eine gute Wegbeschreibung hilft wenig, wenn sie zur Stadt von gestern gehört.

Im Countdown zu GTA 6 interessiert mich genau dieses Bild: Die Route ist verständlich, die Richtung klingt plausibel, aber die Brücke auf der Karte ist inzwischen gesperrt. Für mich passt es zu einem KI-Auftrag mit veraltetem Wissen.

Für GTA 6 nennt Take-Two weiterhin den 19. November 2026 als angekündigten Termin. [1] Bei Unternehmensinformationen würde ich mich mit einem früher bestätigten Stand allerdings nicht automatisch zufriedengeben.

Wenn im Vertrieb bereits das neue Angebot gilt und die KI trotzdem den alten Leistungsumfang in einen Kampagnenentwurf schreibt, würde ich zuerst den Weg der Information prüfen. Nur auf die Antwort zu schauen, wäre mir zu spät.

Meine Frage an die Unternehmensleitung lautet deshalb: Welche Version Ihres Unternehmens geht tatsächlich in den nächsten KI-Auftrag ein?

Zwischen einer neuen Datei und einer neuen Antwort liegt ein Weg

Ich würde drei Stellen getrennt ansehen: die ursprüngliche Unterlage, den Bestand, in dem gesucht wird, und die daraus entstandene Antwort. Das ist für mich eine praktische Prüfreihenfolge.

Zuerst die Unterlage. Dort muss stehen, was für den Auftrag gelten soll. Ein aktueller Dateiname allein sagt mir noch nicht, ob sich eine Leistung geändert hat, nur die Gestaltung überarbeitet wurde oder eine frühere Fassung weiterhin für Bestandskunden gilt.

Danach die Suche. Wenn ein System aus einem eigenen aufbereiteten Wissensbestand arbeitet, würde ich nachsehen lassen, ob die neue Fassung dort angekommen ist. Für diesen Auftrag interessiert mich außerdem, ob die ersetzte Aussage weiterhin als aktueller Treffer auftaucht.

Schließlich die Antwort. Selbst wenn die passende Passage vorliegt, würde ich prüfen, ob der Entwurf ihre Bedingungen mit übernimmt. Aus einer verfügbaren Leistung für bestimmte Kunden darf in meinem Entwurf nicht beiläufig ein allgemeines Versprechen werden.

Diese Unterscheidung hilft mir bei der Fehlersuche. Bei einer falschen Antwort würde ich nicht sofort den gesamten Ansatz verwerfen oder lediglich den Prompt verlängern. Ich möchte zunächst wissen, an welcher Übergabe der verwendete Stand vom beabsichtigten Stand abweicht.

Was RAG an diesem Problem verändert

Retrieval-Augmented Generation, kurz RAG, verbindet die Textgenerierung mit abgerufenen Informationen. Die ursprüngliche Forschungsarbeit von Patrick Lewis und Mitautoren kombinierte ein vortrainiertes Sprachmodell mit einem durchsuchbaren Wikipedia-Index. Zur Anfrage wurden passende Textpassagen abgerufen und für die Ausgabe verwendet. [2]

Die Autoren untersuchten auch den Austausch dieses externen Wissensbestands: Sie wechselten zwischen Wikipedia-Ständen von 2016 und 2018 und fragten nach damaligen politischen Amtsträgern. Der Versuch zeigt die Bedeutung des verwendeten Indexstands. Er belegt keine automatische Synchronisierung beliebiger Unternehmensunterlagen. [2]

Für eine konkrete Anwendung würde ich deshalb genauer nachfragen, was „arbeitet mit unseren Daten“ heißt. Werden Unterlagen bei jedem Auftrag bewusst beigelegt? Durchsucht die Anwendung aktuelle Originale? Oder verwendet sie einen Bestand, der zuvor aus diesen Originalen aufgebaut wurde?

Ich würde diese Wege nach der Aufgabe beurteilen. Für einen einzelnen Anzeigenentwurf kann eine ausdrücklich ausgewählte, überschaubare Unterlage ein brauchbarer Anfang sein. Wiederholen sich Fragen über viele Dokumente, wird die laufende Aufbereitung selbst zu einem Teil der Arbeit.

Dabei möchte ich den Zusammenhang verständlich beschrieben bekommen. Welche Änderungen gelangen wann in die Suche? Woran erkennt die nächste Person den verwendeten Stand? Und was geschieht mit einer Information, die inzwischen zurückgenommen wurde?

Auch das Entfernen gehört zur Aktualisierung

Dass diese Frage technisch eigenständig ist, zeigt die Dokumentation von Azure AI Search. Bei den beschriebenen Azure-Storage-Indexern werden neue und geänderte Inhalte anhand von Zeitstempeln erkannt. Das Erkennen von Löschungen benötigt dagegen eine passende Löschstrategie. Ohne sie können Suchdokumente bestehen bleiben, obwohl die ursprünglichen Dateien entfernt wurden. [3]

Diese Aussage betrifft die dokumentierte Microsoft-Konfiguration. Für ein anderes System würde ich dessen tatsächliches Verhalten gesondert prüfen. Der Name einer Architektur beantwortet diese Betriebsfrage noch nicht.

Für ein Marketingangebot würde ich den gewünschten Zustand deshalb ausdrücklich formulieren: Die zurückgenommene Leistung soll bei neuen allgemeinen Anfragen nicht mehr als aktuelles Angebot verwendet werden. Eine ältere Fassung kann für eine historische Frage weiter relevant sein. Dann möchte ich ihren zeitlichen Bezug erkennen können.

Für mich folgt daraus auch keine pauschale Forderung, alte Unterlagen zu löschen. Ein Archiv und ein aktueller Arbeitsbestand haben unterschiedliche Aufgaben. Ich würde zuerst klären, wofür eine Fassung weiterhin gebraucht wird und wie die Suche diese Einordnung berücksichtigt.

Bei der Abnahme würde ich deshalb beide Richtungen ansehen: Ist die neue Aussage auffindbar? Und wird die bisherige Aussage noch in einer Weise angeboten, die zum nächsten Auftrag nicht passt? Nur die neue Datei im Verzeichnis zu zeigen, würde meine Frage nicht beantworten.

Ein Link macht aus einer Aussage noch keinen passenden Beleg

Auch nach einem erfolgreichen Abruf bleibt die Formulierung prüfbedürftig. Das Forschungsprojekt ALCE von 2023 bewertet Antworten unter anderem danach, ob ihre Aussagen durch die zitierten Passagen gestützt werden und welche Quellenverweise inhaltlich beitragen. Die Untersuchung trennt damit die Qualität des Belegbezugs von einem bloß vorhandenen Zitat. [4]

Für einen Angebotsentwurf würde ich genau dort hinsehen. Als hypothetisches Beispiel: Die Unterlage nennt eine Betreuung für einen bestimmten Zeitraum. Im Entwurf steht daraus eine zeitlich unbegrenzte Betreuung. Ein Link zur richtigen Unterlage würde den zusätzlichen Umfang nicht begründen.

Meine erste Frage wäre dann sehr konkret: Welche Passage trägt diese Zusage? Ich möchte den relevanten Satz und seine Bedingungen sehen. Dafür muss die gesamte technische Verarbeitung nicht auf der Werbeanzeige stehen. Für die fachliche Prüfung sollte der Zusammenhang aber erreichbar sein.

Die Untersuchung bewertet die Antworten der damals eingesetzten Modelle. Für meine Arbeit liefert sie einen hilfreichen Maßstab: Herkunft und Aussage müssen zusammenpassen. Ob eine bestimmte Anwendung das bei meinen Aufträgen leistet, würde ich an deren tatsächlichen Ergebnissen beurteilen.

Das kann auch eine Grenze der Formulierung sichtbar machen. Wenn die Unterlage eine Aussage nur für einen bestimmten Markt trägt, würde ich diesen Bezug beibehalten oder die weitergehende Aussage streichen. Eine zusätzliche sprachliche Runde wäre für mich erst danach sinnvoll.

Welchen Weg ich für die eigene Aufgabe wählen würde

Vor einer technischen Lösung würde ich die Häufigkeit und den Umfang der Aufgabe ansehen. Ein gelegentlicher Text auf Basis einer bekannten Unterlage rechtfertigt für mich noch keinen großen gemeinsamen Wissensbestand. Ich würde die gültige Fassung auswählen, den Auftrag eingrenzen und den Entwurf daran prüfen.

Bei wiederkehrenden Fragen aus mehreren Fachbereichen würde ich anders abwägen. Dann interessiert mich, wer die benötigten Inhalte bereitstellt, wie Änderungen verarbeitet werden und welche Rückmeldung bei einer fehlgeschlagenen Aktualisierung entsteht. Der Betrieb der Suche gehört für mich dann zur Bewertung des Angebots.

Ich würde außerdem nach der Art der Information unterscheiden. Eine grundsätzliche Beschreibung der eigenen Arbeitsweise lässt sich möglicherweise anders pflegen als eine kurzfristige Verfügbarkeit. Wenn eine Aussage nur zu einem bestimmten Zeitpunkt gelten kann, möchte ich für genau diese Aussage einen passenden Abrufweg und eine vertretbare Prüfzeit festlegen.

„Alles jede Nacht aktualisieren“ wäre mir als pauschale Antwort zu grob. Für eine selten geänderte Einführung kann das anders zu beurteilen sein als für ein Angebot, das am selben Vormittag zurückgenommen wurde. Die benötigte Aktualität würde ich aus dem jeweiligen Auftrag ableiten.

Dabei würde ich Aufwand und Nutzen zusammen betrachten. Eine gemeinsame Suche kann die Auswahl über viele Unterlagen unterstützen. Sie bringt aber auch Pflegeaufgaben mit. Wenn niemand die fachliche Gültigkeit der Ausgangsinformationen klären kann, würde ich zunächst dort arbeiten, bevor ich mehr Inhalte anschließe.

Eine Änderung über den ganzen Weg verfolgen

Für eine erste Abnahme würde ich einen überschaubaren Inhalt mit einer eindeutig beschriebenen Änderung auswählen.

Ich würde vorab festhalten, welche Aussage ersetzt wird und welche künftig gelten soll. Danach würde ich getrennt prüfen lassen, ob das Original stimmt und ob der Suchbestand die beabsichtigte Fassung enthält. So lässt sich eine verzögerte Aufbereitung von einer falschen Ausgangsunterlage unterscheiden.

Anschließend würde ich dieselbe fachliche Frage mit unterschiedlich formulierten Anfragen stellen. Mir ginge es dabei um die Beobachtung, welche Passage tatsächlich ausgewählt wird und ob ihre Bedingungen in der Antwort erhalten bleiben. Ein einzelner passender Treffer wäre für mich ein erster Befund, keine allgemeine Zusicherung.

Zum Schluss würde ich die ersetzte Aussage gezielt suchen lassen. Falls sie auftaucht, möchte ich ihren Status verstehen: Ist sie ein korrekt eingeordnetes Archivstück oder wird sie weiterhin als heutige Grundlage angeboten? Daraus ergeben sich unterschiedliche nächste Schritte.

Das Ergebnis dieser Prüfung sollte für mich knapp nachvollziehbar sein: ausgewählter Inhalt, beabsichtigte Änderung, verwendeter Stand und beobachtete Antwort. Damit kann die nächste Person entscheiden, ob die Aufgabe brauchbar unterstützt wird oder an welcher Stelle nachgearbeitet werden muss.

Auf Leitungsebene würde ich diesen Zusammenhang einfordern. Die laufende fachliche Pflege kann im zuständigen Bereich liegen; die technische Aktualisierung braucht ebenfalls einen benannten Verantwortungsbereich. Für die Bewertung möchte ich sehen, wie beide bei einer konkreten Änderung zusammenkommen.

Das ist auch mein Maßstab für die Arbeit mit ANORA. Je häufiger ein System Informationen für neue Aufgaben verwendet, desto wichtiger wird für mich der nachprüfbare Weg einer Änderung. Ein flüssiger Text beantwortet die Frage nach seinem Informationsstand noch nicht.

Bei einer alten Karte kann ich sehr genau der falschen Route folgen. Bevor ich das Tempo erhöhe, würde ich deshalb prüfen, welche Karte ich überhaupt verwende.

Quellen

[1] Take-Two Interactive, Geschäftsergebnisse vom 9. November 2026, Abschnitt „Product Releases“: angekündigter GTA-6-Termin.

[2] Patrick Lewis und Mitautoren, „Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks“, NeurIPS 2020; hier arXiv-Fassung v4 vom 12. April 2021, insbesondere Abschnitte 2 und 4.5 „Index hot-swapping“: Originalpublikation.

[3] Microsoft Learn, „Change and delete detection using indexers for Azure Storage in Azure AI Search“, Einführung und „Native blob soft delete“: offizielle Dokumentation.

[4] Tianyu Gao und Mitautoren, „Enabling Large Language Models to Generate Text with Citations“, EMNLP 2023, insbesondere Abschnitt 3.3: Originalpublikation.