Dokumente mit KI vergleichen: Unterschiede fachlich prüfen

Welche Frage soll der Vergleich beantworten?

Ein Vergleich zweier Unterlagen gerät dann zum Zufallsfund, wenn er ohne Fragestellung beginnt: Das Auge springt von Abweichung zu Abweichung, und am Ende steht eine Liste von Unterschieden, ohne dass klar ist, welche davon für die Entscheidung Ihrer Verwaltung zählen. Besser ist der umgekehrte Weg. Legen Sie vor dem Einlesen fest, welche Frage der Vergleich beantworten soll, etwa: Ändert die neue Fassung der Richtlinie Fristen, Voraussetzungen oder Zuständigkeiten? Aus dieser Frage leiten Sie die Kriterien ab, nach denen Sie beide Fassungen durchgehen.

1. Die Vergleichsfrage in einem Satz formulieren, zum Beispiel: Ändert die neue Fassung Fristen oder Voraussetzungen?
2. Aus der Frage die Prüfmerkmale ableiten, etwa Fristen, Voraussetzungen, Zuständigkeiten und Beträge.
3. Festlegen, wie das Ergebnis ausgegeben werden soll, zum Beispiel als Tabelle mit Fundstellen.
4. Formulierungsunterschiede und sachliche Änderungen von vornherein als getrennte Kategorien führen.

Diese Vorbereitung entspricht dem, was die bayerische Prompt-Hilfe für den Umgang mit KI-Systemen empfiehlt: eine klare Aufgabe, festgelegte Kontextgrenzen und ein definiertes Ausgabeformat^[1]. Eine offene Frage oder eine allgemeine Aufgabenbeschreibung führt in der Regel zu sehr allgemeinen Ausgaben; je präziser der Auftrag, desto brauchbarer das Ergebnis.

Wichtig ist die gedankliche Trennung, die schon hier beginnt: Nicht jeder Textunterschied ist inhaltlich relevant. Eine angepasste Satzstellung oder ein modernisiertes Vokabular kann die fachliche Aussage unverändert lassen, während ein einzelnes geändertes Datum eine Frist verschiebt. Wer beide Ebenen von Anfang an getrennt bewertet, verliert später keine Zeit mit Diskussionen über Kosmetik, während die sachlichen Abweichungen untergehen.

Sind die Ausgangsdokumente eindeutig bezeichnet?

Bevor eine Zeile verglichen wird, braucht der Vergleich einen sauberen Unterbau: Beide Fassungen müssen eindeutig bezeichnet sein. Das klingt selbstverständlich, entscheidet in der Praxis aber darüber, ob Dritte das Ergebnis später nachvollziehen können oder ob es bei einem nicht belegten Eindruck bleibt.

• Titel und gegebenenfalls Aktenzeichen der Unterlage
• Datum oder Stand der Fassung, etwa Beschlussdatum oder Versionsdatum
• Fundort: Wo ist das Dokument abgelegt, von wo stammt die Kopie?
• Freigabestatus: Ist die Fassung geprüft und freigegeben oder ein Entwurf?

Der bayerische KI-Leitfaden für Beschäftigte macht deutlich, dass im dienstlichen Kontext nur solche KI-Systeme genutzt werden dürfen, die die Behörde zuvor geprüft und freigegeben hat, und dass die Eingaben den festgelegten Nutzungsbedingungen folgen müssen^[2]. Übertragen auf den Dokumentvergleich heißt das: Nur freigegebene Unterlagen gehören in ein freigegebenes KI-System, und vor dem Upload lohnt ein kurzer Blick auf Personenbezug und Vertraulichkeit. Wie sich eine solche Prüfung Schritt für Schritt durchführen lässt, beschreibt unser Leitfaden zur Freigabe vor dem Upload.

Ein klarer Grenzverlauf gehört ebenfalls dazu: KI ersetzt keine Versionsverwaltung. Welche Fassung aktuell ist, wo sie abgelegt ist und wer sie wann geändert hat, bleiben Aufgaben der eigenen Ablage und Dokumentenlenkung. Der KI-Vergleich arbeitet mit den beiden Fassungen, die Sie ihm vorlegen; er weiß nicht von selbst, welche davon der letzte Stand ist.

Welche Kriterien gehören in die Vergleichsmatrix?

Der naheliegendste Weg, zwei Dokumente zu vergleichen, ist der Blick auf Zeichenunterschiede: Was ist anders formuliert, was ist neu, was fehlt? Für die fachliche Arbeit taugt diese Sammlung wenig, denn sie misst Textoberfläche, nicht Inhalt. Eine Vergleichsmatrix dreht die Richtung um: Sie legt zuerst die Merkmale fest, die für die Frage Ihrer Verwaltung zählen, und prüft beide Fassungen anhand dieser Merkmale.

• Fristen: Antragsschlüsse, Fristbeginn, Fristlänge
• Voraussetzungen: Anspruchsvoraussetzungen, Ausschlüsse, Nachweispflichten
• Zuständigkeiten: zuständige Stellen, Vertretungsregeln, Beteiligungen
• Beträge und Höchstwerte: Sätze, Grenzen, Bemessungsgrundlagen
• Ansprechpartner: Zuständigkeit, Erreichbarkeit, Verfahrenswege
• Rechtsgrundlagen: geänderte Normen, neue Verweise

Für die Ausgabe nennt die bayerische Prompt-Hilfe als vierte Grundlage des Promptings das Ausgabeformat: Bestimmen Sie das Format der Antwort, etwa als Liste oder Tabelle^[1]. Genau so funktioniert die Matrix: Der Auftrag an die KI lautet, beide Fassungen ausschließlich entlang der vereinbarten Kriterien zu prüfen und das Ergebnis tabellarisch mit Fundstellen auszugeben. So entsteht kein Textberg, sondern eine prüfbare Übersicht.

Unterschiedliche Gliederungen sind der häufigste Stolperstein: Wenn Fassung B einen Abschnitt umgestellt hat, findet ein zeilenweiser Vergleich nichts Vergleichbares. Auch das löst die Matrix, wenn Sie vorab gemeinsame Vergleichskriterien und die Fundstellen je Fassung festlegen. Und falls die Unterlagen zunächst aufbereitet werden müssen, hilft unser Leitfaden, Verwaltungsdokumente mit KI gezielt zusammenzufassen.

Wie werden Abweichungen mit Fundstellen belegt?

Eine Abweichung, die niemand am Originaldokument nachlesen kann, ist im Dienstbetrieb wertlos. Sie wird in der Besprechung angezweifelt, in der Schriftführung ignoriert und im ungünstigsten Fall als Meinung abgetan. Deshalb gilt: Jede relevante Abweichung wird mit beiden Ausgangspassagen verbunden, sodass eine zweite Person den Befund in wenigen Minuten kontrollieren kann.

• Fundstelle in Fassung A: Abschnitt, Seite, Randnummer
• Fundstelle in Fassung B: ebenso
• Wörtlicher Wortlaut beider Passagen, gekürzt, aber nicht paraphrasiert
• Kurze Notiz zur fachlichen Bedeutung, noch ohne abschließende Bewertung

Das Nachweisprinzip ist in der Verwaltung bereits erprobt. Die Rechercheassistenz F13 des Innovationslabors Baden-Württemberg beantwortet Fragen zu hochgeladenen Dokumenten und nennt die Quellen, anhand derer die Nutzerinnen und Nutzer die Antworten validieren und vertiefen können^[3]. Übertragen auf den Vergleich heißt das: Eine KI-Auskunft ohne nachvollziehbare Fundstelle wird nicht übernommen, sondern nachgefragt.

Die kritische Prüfung jeder Ausgabe ist dabei keine Option, sondern Pflicht: Der bayerische KI-Leitfaden für Beschäftigte behandelt die Frage, ob man sich auf die Ergebnisse generativer KI-Systeme verlassen kann, und macht deutlich, dass Ergebnisse nicht ungeprüft übernommen werden^[2]. Fundstellen sind damit auch ein Mittel gegen erfundene Angaben: Was die KI als Fundstelle nennt, wird am Dokument gegengeprüft, bevor die Zeile in die Matrix übernommen wird.

Welche Unterschiede verändern die fachliche Aussage?

Mit belegten Fundstellen liegt der eigentliche Fachauftrag vor: bewerten, welche Unterschiede die Aussage der Unterlage verändern und welche nicht. Diese Bewertung lässt sich nicht automatisieren, aber sie lässt sich strukturieren, indem Sie zwei Kategorien führen und jede Fundstelle einer der beiden zuordnen.

Die Trennung schützt vor zwei Fehlern: vor der Aufregung über eine kosmetische Umstellung, die inhaltlich nichts ändert, und vor dem Übersehen einer kleinen Änderung mit großer Wirkung, etwa wenn aus einem Kann eine Muss-Vorgabe wird oder eine Höchstgrenze um einen Betrag rutscht.

Die Verantwortung für diese Bewertung verlagert der KI-Einsatz nicht: Wer eine Zeile der Matrix abzeichnet, übernimmt sie auch fachlich. Wie sich diese Kontrolle bei behördlichen Schreiben organisieren lässt, ohne den Entwurf der KI zur fertigen Entscheidung zu machen, zeigt unser Leitfaden zum Entwurf von Antwortschreiben mit KI.

Wie wird ein Vergleich unabhängig nachgeprüft?

Ein Vorgehen ist dann belastbar, wenn eine zweite Person ohne Vorwissen das Ergebnis kontrollieren kann. Das lässt sich am besten an einem durchgespielten Beispiel zeigen. Nehmen wir zwei Fassungen einer fiktiven Bekanntmachung zur Förderung des Vereinslebens: Fassung A als Beschluss vom März, Fassung B als überarbeitete Fassung im Herbst. Die Vergleichsfrage lautet: Ändert die neue Fassung Fristen oder Voraussetzungen? Die folgende Matrix ist redaktionell entwickelt und dient ausschließlich der Veranschaulichung.

Die Kontrolle gelingt, weil jede Zeile für sich prüfbar ist: Eine zweite Person schlägt die angegebene Fundstelle in beiden Fassungen nach, liest die Passagen gegenüber und prüft, ob die eingetragene Bedeutung stimmt. Sie muss dafür weder den ursprünglichen Vergleich kennen noch die KI-Ausgabe für wahr nehmen.

Zwei Vorsichtsregeln gehören dazu. Erstens werden die wesentlichen Kriterien zusätzlich am Original geprüft, auch wenn die KI sie als unverändert ausgewiesen hat. Nur so verhindern Sie, dass eine übersehene Abweichung durchrutscht, weil beide Fassungen an dieser Stelle nie in den Vergleich eingelesen wurden. Zweitens gilt: Bleibt eine Zeile offen, weil keine Fundstelle geliefert werden kann, wird sie als offen gekennzeichnet und manuell nachgearbeitet, nicht verworfen.

Welcher Vergleich eignet sich für einen Schreibtisch-Test?

Der beschriebene Ablauf lässt sich ohne Projektantrag an einem Nachmittag erproben, und dafür ist Charly_Schreibtisch gebaut: der DSGVO-konforme KI-Arbeitsplatz für Mitarbeitende in Kommunen und Landkreisen, der Informationen strukturiert und vergleicht, lange Dokumente zusammenfasst und erklärt sowie gezielte Fragen zu Dokumenten beantwortet.

1. Zwei freigegebene Unterlagen aus Ihrer Verwaltung wählen, etwa zwei Fassungen einer Richtlinie oder Bekanntmachung
2. Die Vergleichsfrage und die Kriterienmatrix aus den Abschnitten oben schriftlich festlegen
3. Den Vergleich mit beiden Fassungen durchführen und das Ergebnis als Tabelle mit Fundstellen ausgeben lassen
4. Jede Zeile am Originaldokument nachprüfen und sachliche von formalen Abweichungen trennen
5. Das Ergebnis im Kollegium vorstellen und prüfen, wo der Ablauf Zeit gespart und wo er Handarbeit ersetzt hat

Eine Übersicht der Anwendungsfälle, vom Verstehen langer Dokumente über das Entwerfen und Überarbeiten von Texten bis zur Nutzung des Wissens Ihrer Verwaltung, finden Sie auf der Produktseite zu Charly_Schreibtisch.