Definition
Quellenkonflikt-Auflösung umfasst Regeln und Workflows, mit denen ein Retrieval- oder RAG-System umgeht, wenn relevante Quellen einander widersprechen. In juristischen Kontexten sind Konflikte oft real (unterschiedliche Regeln je Zeit/Jurisdiktion) oder scheinbar (abweichende Auslegung, fehlender Kontext, überholte Version).
Warum es wichtig ist
- Korrektheit: Antworten müssen kontrollierende Autorität und Anwendbarkeit berücksichtigen.
- Sicherheit: Konflikte zu verstecken erzeugt falsche Sicherheit und Compliance-Risiko.
- Vertrauen: Transparenz über Unsicherheit steigert Glaubwürdigkeit.
- Triage: echte Ambiguitäten können zu Human Review eskaliert werden.
Wie es funktioniert
Üblich ist die Kombination aus Erkennung + Policy:
Retrieve -> Konflikte erkennen -> Hierarchie + Anwendbarkeit anwenden -> mit Zitationen darstellen -> bei Ambiguität eskalieren
Typische Strategien:
- Höhere Autorität und klare Anwendbarkeit bevorzugen (Jurisdiktion, Daten)
- “ersetzt” vs “koexistiert” unterscheiden (z.B. unterschiedliche Zeiträume)
- Beide Positionen mit Bedingungen zeigen, nicht alles zu einer Aussage verschmelzen
- Menschliche Aufsicht bei High-Impact oder unaufgelösten Konflikten
Praktisches Beispiel
Zwei Quellen nennen unterschiedliche Steuersätze. Eine gilt nur vor einem Änderungsdatum. Das System hebt die Geltungsdaten hervor, zitiert beide Fassungen und nutzt die in Kraft befindliche Norm für den angefragten Zeitraum.
Häufige Fragen
Q: Kann ein LLM Konflikte allein lösen?
A: Es kann vergleichen und zusammenfassen, aber Authority-/Applicability-Policies sollten systemseitig erzwungen werden, mit Eskalation bei verbleibender Unsicherheit.
Q: Sollte man Konflikte immer anzeigen?
A: Für Legal/Tax ist es meist sicherer, Konflikte (oder zumindest Unsicherheit) sichtbar zu machen, statt sie zu verstecken.
Verwandte Begriffe
- Autoritäts-Ranking-Modell - kontrollierende Quellen priorisieren
- Gewichtung der Quellenzuverlässigkeit - Einfluss schwacher Quellen reduzieren
- Menschliche Aufsicht - Eskalationspfad bei Ambiguität
- Algorithmische Transparenz - Behandlung erklärbar machen
- Compliance-bewusstes Retrieval - Policies und Restriktionen durchsetzen
Referenzen
Verordnung (EU) 2024/1689 (EU AI Act).
References
Regulation (EU) 2024/1689 (EU AI Act).