Kurz zusammengefasst
- Quellen brauchen eine fachlich definierte Rangfolge und erkennbare Gültigkeit.
- Ein höherer Ähnlichkeitswert macht eine Passage nicht verbindlicher.
- Das System muss zwischen keiner Fundstelle und einer nur schwach passenden Fundstelle unterscheiden.
- Konflikte und Wissenslücken sind Betriebsdaten, aus denen die Quellen verbessert werden sollten.
Welche Arten von Konflikten treten auf?
Widersprüche entstehen nicht nur durch zwei gegenteilige Sätze. Häufig stehen eine alte und eine neue Version nebeneinander, eine allgemeine Regel trifft auf eine Ausnahme oder zwei Bereiche verwenden denselben Begriff unterschiedlich. Die Anwendung benötigt diese Metadaten, um den Fall zu erkennen.
- Abgelaufene und aktuelle Version derselben Regel
- Globale Richtlinie und lokale, zulässige Ausnahme
- Entwurf und freigegebenes Dokument ohne klare Kennzeichnung
- Unterschiedliche Definitionen oder Geltungsbereiche
- Datenbankwert und Dokumentaussage mit verschiedenem Aktualitätsstand
Wie wird Quellenpriorität festgelegt?
Priorität ist eine fachliche Entscheidung und darf nicht dem Sprachmodell überlassen werden. Für jeden Themenbereich sollte feststehen, welche Quelle verbindlich ist, wie Ausnahmen markiert sind und ab wann eine Version gilt.
- Freigabestatus und verantwortlicher Eigentümer
- Gültigkeitszeitraum und betroffener Standort oder Personenkreis
- Quellentyp: Originalsystem, Richtlinie, Hilfetext oder informelle Notiz
- Explizite Regel für Spezialfall gegenüber allgemeiner Regel
Wie sollte der Assistent reagieren?
Kann der Konflikt anhand freigegebener Regeln eindeutig gelöst werden, verwendet die Anwendung die gültige Quelle und nennt sie. Bleibt die Lage unklar, muss die Antwort den Widerspruch sichtbar machen. Ohne ausreichenden Beleg ist eine begrenzte Nicht-Antwort fachlich besser als eine erfundene Lösung.
| Quellenzustand | Darf das System auflösen? | Antwortverhalten | Weiterer Weg |
|---|---|---|---|
| Freigegebene aktuelle Version und klar abgelöste Altversion | Ja, nach dokumentierter Versionsregel | Aktuelle Aussage mit Gültigkeit und Fundstelle nennen | Altversion aus aktiver Suche entfernen und Regressionstest behalten |
| Allgemeine Regel und freigegebene lokale Ausnahme | Ja, wenn Zielgruppe, Ort und Zeitraum eindeutig passen | Anwendbare Ausnahme erklären und allgemeine Regel als Kontext kennzeichnen | Fehlende Geltungsangaben zuerst erfragen |
| Zwei freigegebene Quellen mit unklarer Priorität | Nein | Widerspruch mit beiden Fundstellen sichtbar machen und keine Entscheidung erfinden | An fachlichen Eigentümer eskalieren und Antwort bis zur Klärung begrenzen |
| Nur schwach passender Treffer oder kein Beleg | Nein | Wissenslücke benennen statt eine plausible Antwort zu erzeugen | Rückfrage stellen oder zuständige Stelle nennen |
| Verbindliche Quelle ist technisch nicht erreichbar | Nein | Ausfall und letzten bekannten Datenstand transparent anzeigen, keine Aktualität behaupten | Definierten Ausfallprozess und Monitoring auslösen |
Wie werden Wissenslücken dauerhaft behoben?
Nicht beantwortbare Fragen, häufige Konflikte und überstimmte Antworten sollten kategorisiert werden. Der fachliche Eigentümer entscheidet, ob Quellen bereinigt, Metadaten ergänzt oder eine neue verbindliche Aussage veröffentlicht wird. Danach wird der Fall als Regressionstest aufgenommen.
- Konflikt mit Anfrage, Treffern und Versionen protokollieren
- Datenschutzgerecht an den zuständigen Inhalteigentümer übergeben
- Quelle statt nur Prompt oder Antworttext korrigieren
- Korrigierten Fall in Retrieval- und Antwort-Evals übernehmen
Beispiel: widersprüchliche Spesenlimiten
Ein altes Reisereglement nennt eine Hotelpauschale von 180 Franken, eine neue Länderregel 220 Franken. Metadaten zeigen, dass die neue Regel ab Januar für Deutschland gilt. Bei einer Reise im Februar verwendet die Anwendung die Länderregel und zeigt beide Geltungsangaben. Fehlt das Reiseziel, fragt sie nach, statt eine Limite zu wählen.
Was Sie mitnehmen sollten
Definieren Sie Verbindlichkeit ausserhalb des Modells. Ein guter Assistent löst nur dokumentierte Konflikte und macht alle übrigen Unsicherheiten für Menschen bearbeitbar.
Quellen und Vertiefung
Diese Primärquellen vertiefen Definitionen, technische Grundlagen oder verantwortlichen Einsatz.
Inhaltlich geprüft