Vertragsdatenprüfung über Dokumente hinweg endet als kurzer Ausnahmeb ericht

Wenn ein Team der Rechtsabteilung beginnt, Daten aus Verträgen zu extrahieren, läuft der erste Durchgang meist besser als erwartet. Die KI liest die Parteinamen, die Daten, die Beträge, die Verlängerungsbedingungen und erstellt eine brauchbare Tabelle. Dann stößt das Team auf den Teil, der nichts mit dem Lesen zu tun hat. In einem Thread zur Rechtsabteilungs-IT auf Reddit sagte ein Prüfer es deutlich: „Der schmerzhafte Teil ist normalerweise nicht, die Daten einmal aus dem Vertrag zu bekommen. Es geht darum, nachzuweisen, dass die extrahierten Daten konsistent genug sind, um sich darauf zu verlassen" (r/legaltech).

Derselbe Thread nannte die konkrete Version dieses Problems. Eine Zahl kann „in einer Anlage technisch korrekt und in der operativen Klausel falsch sein, und automatisierte Tools zeigen oft beides an, ohne zu sagen, welche maßgeblich ist." Der Prüfer hält also zwei Dokumente offen und verfolgt einen Wert durch beide, weil die Mastervereinbarung, die Anlage, die Änderungsvereinbarung und das Verlängerungsschreiben dieselben Fakten jeweils neu darstellen. Dieser Artikel behandelt diesen Prüfungsschritt: welche Felder geprüft werden müssen, warum die manuelle Gegenprüfung scheitert und wie das gesamte Portfolio in einer Tabelle gegen sich selbst geprüft werden kann, sodass das Ergebnis ein kurzer Ausnahmeb ericht ist (diese Felder sehen normal aus, diese müssen geprüft werden) statt einer zweiten Lektüre von allem.

Schluss mit Abtippen — lassen Sie KI Ihre Dokumente lesen
Bild oder PDF hochladen — strukturierte Daten in 10 Sekunden
Jetzt testen →
Blog-Titelbild mit dem Titel 'Dokumentenübergreifende Vertragsdatenprüfung endet als Ausnahmeb ericht' und drei Symbolen darunter: ein Dokumentenstapel mit der Beschriftung 'Ein Dokumentensatz', eine Tabelle mit einer Häkchenspalte mit der Beschriftung 'Eine Tabelle' und ein grünes Häkchen-Abzeichen mit der Beschriftung 'Ausnahmeb ericht'.

Wichtigste Erkenntnisse

  1. Der schmerzhafte Teil der Vertragsprüfung ist nicht die erste Extraktion, sondern der Nachweis, dass derselbe Wert in der Mastervereinbarung, den Anlagen und den Änderungsvereinbarungen übereinstimmt.
  2. 6,57 Prozent ist die Fehlerquote beim Lesen eines Werts aus einem Quelldokument und der manuellen Eingabe in einen Datensatz, gegenüber 0,29 Prozent bei direkter Eingabe.
  3. Wenn dasselbe Feld aus jedem Dokument in eine Spalte gesetzt wird, führt die Tabelle die Prüfung für Sie durch und liefert einen kurzen Ausnahmeb ericht der Werte, die geprüft werden müssen.

Was die Überprüfung von Vertragsdaten tatsächlich umfasst

Dreispaltige Vergleichstabelle mit dem Titel 'Wer prüft was in einem Dokumentensatz', die drei Rollen zeigt: Vertragsmanager, der wiederkehrende Felder mit den Gegenstücken abgleicht, Prüfer, der dieselben Felder aus der anderen Richtung prüft, und Anwalt, der die für die Entscheidung relevanten Klauseln prüft.

Vertragsportfolios bestehen aus Dokumenten, die aufeinander verweisen. Eine Mastervereinbarung definiert die Geschäftsbeziehung, Anlagen und Zeitpläne enthalten die Details (Gebührenpläne, Leistungsbeschreibungen, Preislisten), Änderungsvereinbarungen ändern Teile des Originals, und Verlängerungsschreiben verlängern es. Jedes Dokument wiederholt Fakten, die auch in den anderen vorkommen: die Namen der juristischen Personen, das Wirksamkeitsdatum, den Zahlungsbetrag, die Währung, die Kündigungsfrist, das anwendbare Recht. Die dokumentenübergreifende Überprüfung von Vertragsdaten ist der Prozess, bei dem sichergestellt wird, dass jede Wiederholung mit allen anderen übereinstimmt, bevor die extrahierten Daten gemeldet oder verwendet werden.

Ein einzelner Vertrag ist selten die Vertrauenseinheit. Die Einheit ist der Dokumentensatz, und der Satz ist nur so zuverlässig wie sein inkonsistentestes Mitglied.

Die Überprüfungsarbeit hat auch in kleinen Teams eine feste Struktur. Die Person, die den Satz zusammengestellt hat (Rechtsanwaltsfachangestellte/r, Vertragsmanager/in oder Legal Operations Analyst/in), gleicht jedes wiederkehrende Feld mit seinem Gegenstück in den zugehörigen Dokumenten ab. Die prüfende Person, die sich auf die Daten stützen wird, prüft dieselben Felder aus der anderen Richtung. Und die Anwältin bzw. der Anwalt, die bzw. der zu einem Streitfall oder einer Verlängerung berät, prüft die spezifischen Klauseln, die für die anstehende Entscheidung relevant sind. Dieselben drei Rollen treten auf, ob es sich um einen nationalen Rollout mit einer Dienstleistungsvereinbarung und vierzig Anlagen handelt oder um die Leasingakten einer kleinen Kanzlei mit einem Vertrag, seinem Nachtrag und seiner Abtretung.

Wer prüftWas verglichen wirdWo es schiefgeht
Vertragsmanager/in oder Legal Operations Analyst/inEntitätsnamen, Wirksamkeitsdaten, Beträge, Verlängerungsbedingungen in Mastervereinbarung, Anlagen und ÄnderungsvereinbarungenLiest Dokumente einzeln, sodass eine Abweichung zwischen zwei Anlagen unsichtbar bleibt
Prüfende/r Anwalt/Anwältin oder Rechtsanwaltsfachangestellte/rZahlungsbeträge, Kündigungsfristen, Kündigungsbedingungen im Abgleich mit den maßgeblichen KlauselnPrüft die Dokumente, an die sie sich erinnern, nicht den vollständigen Satz; Anlage und maßgebliche Klausel werden nur verglichen, wenn eine Frage aufkommt
Das Team, das sich auf die Daten stütztGemeldete Summen und Verpflichtungen im Abgleich mit den QuelldokumentenVertraut dem ersten Dokument, das geöffnet wird; die maßgebliche Klausel befindet sich in einer anderen Datei

Der Umfang dieser Arbeit ist kein Nischenproblem. Das globale Benchmarking der Rechtsabteilungen von ACC aus dem Jahr 2019 ergab, dass interne Anwälte im Durchschnitt 173 Verträge pro Jahr prüfen, mit einer durchschnittlichen Vertragslaufzeit von 30,9 Tagen (ACC 2019 Benchmarking Report). CLOC, das Corporate Legal Operations Consortium, betrachtet die Vertragsbearbeitungszeit als eine der Kernkennzahlen, über die Rechtsabteilungen berichten (CLOC State of the Industry). Und die Kosten jedes Prüfzyklus sind erheblich: Die IACCM-Forschung über 700+ Organisationen bezifferte die durchschnittlichen Kosten für die Bearbeitung eines einfachen Alltagsvertrags auf $6.900, einschließlich etwa fünf Stunden Rechtszeit und achtzehn Stunden Vertragsmanagement- und Beschaffungszeit pro Vereinbarung (WorldCC, The Cost of a Contract). Einen Vertrag zweimal statt einmal zu lesen, ist kein Aufschlag. Es ist ein zweiter vollständiger Durchgang zu diesen Stundensätzen.

Warum der manuelle Abgleich zwischen Dokumenten scheitert

Zweispaltige Vergleichstabelle mit dem Titel 'Warum der manuelle Abgleich scheitert', die zwei Fehlermodi zeigt: Entitätsnamensabweichung mit Beispiel 'Acme Logistics Ltd. vs. Acme Logistics, Inc.' und finanzielle Wertabweichung mit Beschreibung 'Die Anlage nennt einen Betrag, die operative Klausel einen anderen', beide mit roten X-Kennzeichnungen markiert.

Der dokumentenübergreifende Abgleich scheitert aus drei Gründen, und jeder davon betrifft die Uneinigkeit der Dokumente untereinander und nicht eine fehlerhafte Extraktion.

Entitätsnamen weichen zwischen Dokumenten ab. Die Mastervereinbarung nennt „Acme Logistics Ltd.", die Leistungsbeschreibung verwendet „Acme Logistics, Inc.", und das Verlängerungsschreiben kürzt es auf „Acme" ab. Jedes Dokument ist für sich genommen konsistent. Im Vergleich zueinander handelt es sich um drei verschiedene Vertragspartner. Die Abweichung bei rechtlichen Namen ist einer der häufigsten Fehlermodi in Vertragsdatenprojekten und tritt tendenziell spät auf, in einem Bericht oder einem Unterschriftenblock, eher als während der Überprüfung (häufige Fallstricke bei Vertragsextraktionsprojekten).

Finanzielle Beträge tauchen an Stellen auf, die jeweils lokal korrekt sind. Ein Zahlungsbetrag kann in der operativen Zahlungsklausel, in der Gebührenanlage, in einer Änderungsvereinbarung und in der Rechnung erscheinen. Der Betrag in der Anlage ist korrekt, wie er in der Anlage angegeben ist. Der Betrag in der operativen Klausel ist korrekt, wie er in der operativen Klausel angegeben ist. Die Uneinigkeit besteht zwischen den beiden Dokumenten, und keine einzelne Lektüre deckt sie auf. Ein Kommentator aus dem Legal Operations Bereich im selben Reddit-Thread beschrieb genau dies: „Finanzielle Beträge gehören zu den schlimmsten Übeltätern, weil eine Zahl in einer Anlage technisch korrekt und in der operativen Klausel falsch sein kann, und automatisierte Tools oft beide anzeigen, ohne zu sagen, welche maßgeblich ist."

Manuelles Gegenprüfen ist der Ort, an dem Übertragungsfehler tatsächlich entstehen. Die prüfende Person liest eine Zahl aus einem Dokument und sucht sie im anderen, tippt oder gleicht sie visuell ab. Eine systematische Übersichtsarbeit zur manuellen Datenextraktion aus dem Jahr 2023 maß die gepoolte Fehlerquote beim Ablesen eines Werts aus einem Quelldokument und dessen Eingabe in einen strukturierten Datensatz bei 6,57 Prozent, verglichen mit 0,29 Prozent bei direkter Eingabe mit dem Quelldokument vor der operierenden Person (Garza et al., 2023). Wer ein Portfolio durch erneutes Eintippen seiner Zahlen verifiziert, nutzt einen der unzuverlässigsten verfügbaren Prozesse – genau an dem Punkt, an dem die Daten erstmals belastbar werden.

Für die Juristinnen und Juristen, die dies tun, ist das kein Geheimnis. Die Umfrage von EY Law und dem Harvard Law School Center on the Legal Profession aus dem Jahr 2021 unter 1.000 Vertragsfachleuten ergab, dass mehr als die Hälfte der Organisationen angab, dass Vertragsin effizienzen sie Geschäft gekostet hätten, während 99 Prozent sagten, ihnen fehlten die Daten und die Technologie, um den Prozess zu verbessern (EY × Harvard, 2021). Die Lücke ist nicht das Bewusstsein dafür, dass Verifizierung wichtig ist. Es ist ein Weg, den Vergleich durchzuführen, ohne jede Datei erneut zu lesen.

Dokumentenübergreifende Konsistenz in einer einzigen Tabelle

Zweispaltiges Vergleichsdiagramm mit dem Titel „One Table Makes the Difference Visible“ (Eine Tabelle macht den Unterschied sichtbar), das den Kontrast zeigt: links ein rotes X-Abzeichen mit der Bezeichnung „Values Kept Apart“ (Werte getrennt gehalten) und der Beschreibung „Mismatch stays invisible, lives in memory“ (Abweichung bleibt unsichtbar, lebt im Gedächtnis), rechts ein grünes Häkchen-Abzeichen mit der Bezeichnung „Values in One Column“ (Werte in einer Spalte) und der Beschreibung „Mismatch becomes a visible difference“ (Abweichung wird zu einem sichtbaren Unterschied).

Die Lösung beginnt mit einer Beobachtung: Dokumente widersprechen sich nur, wenn ihre Werte getrennt gehalten werden. Fügen Sie dasselbe Feld aus jedem Dokument in dieselbe Spalte einer Tabelle ein, und eine Abweichung zwischen einer Vereinbarung und der nächsten wird zu einem sichtbaren Unterschied statt zu einer Erinnerung. Das ist der Mechanismus im Zentrum des Vertrag zu Excel-Workflows, den die meisten Extraktionsprojekte bereits für den ersten Durchlauf nutzen.

Der Aufbau ist ein Durchlauf über den gesamten Satz. In ImageToTable.ai geben Sie die gewünschten Spaltennamen einmal ein: Firmenname, Wirksamkeitsdatum, Zahlungsbetrag, Automatische Verlängerung, Kündigungsfrist, Anwendbares Recht. Das Tool verwendet die Benutzerdefinierte Spaltenextraktion, was bedeutet, dass die KI jeden Wert überall auf der Seite lokalisiert, indem sie versteht, was der Spaltenname bedeutet – nicht durch Abgleich einer Vorlagenposition (ein tieferer Blick darauf, wie Vertragsextraktion funktioniert). Laden Sie die Mastervereinbarung, alle Anlagen, die Änderungsvereinbarungen und die Verlängerungsschreiben als einen Batch hoch, und jedes Dokument landet als Zeile in derselben Tabelle mit denselben Spalten. Ein Feld, das im gesamten Satz wiederkehrt, sitzt nun in einer vertikalen Spalte, in der Unterschiede leicht erkennbar sind.

Dann übernimmt die Tabelle den Abgleich. Da dasselbe Feld aus jedem Dokument nun in einer Spalte liegt, wird eine Abweichung zwischen der Anlage und der operativen Klausel zu einer Zeile, die Sie finden können, indem Sie diese Spalte sortieren oder eine Tabellenformel darauf richten. Die Aufgabe der Extraktion ist es, die Werte in einer Spalte nebeneinanderzustellen; der Abgleich ist dann nur noch eine Sortierung entfernt und benötigt keine toolseitige Regel darüber, welches Dokument maßgeblich ist.

JPG/PNG/PDF KI-Extraktion

Dateien werden sicher verarbeitet und nicht gespeichert.

Markierte Zellen sind der Punkt, an dem der Überprüfungsmodus greift. Fahren Sie mit der Maus über einen markierten Wert in der Ergebnistabelle oder klicken Sie ihn an, und das Tool hebt die genaue Stelle im Originaldokument hervor, an der dieser Wert gelesen wurde. So sehen Sie beispielsweise, ob die 4.250 $ im Gebührenplan neben einer Tabellenüberschrift mit dem Hinweis „außer Kraft gesetzt" stehen. Klicken Sie auf einen lokalisierten Bereich im Dokument, und das Tool springt zurück zur passenden Zelle. Wurde ein Wert bearbeitet, zeigt ein Klick die ursprüngliche KI-Lesart und ermöglicht die Wiederherstellung. Diese Ebene beantwortet die Frage des Reddit-Kommentators: Wenn dieselbe Zahl in der Anlage und in der operativen Klausel erscheint, welcher vertraut die Überprüfung? Sie vertrauen nicht der Aussage des Tools, sondern folgen der Zelle zurück zur Seite.

Das fertige Ergebnis ist der Ausnahmeb ericht. Sortieren oder filtern Sie die gemeinsame Spalte, und die Zeilen, die vom maßgeblichen Dokument abweichen, heben sich von den übereinstimmenden Zeilen ab. Das ist der Bericht „diese 40 Felder sehen normal aus, diese 8 benötigen eine menschliche Überprüfung", den der ursprüngliche Thread anforderte – erstellt ohne erneutes Lesen des Dokumentensatzes. Die Frage des einzelnen Batches, ob Zeilen übereinstimmen und Summen plausibel sind, wird separat mit den üblichen Stichprobenmethoden zur Extraktionsprüfung und der sieben Punkte umfassenden Verifizierungscheckliste für extrahierte Tabellen behandelt; diese prüfen die Qualität eines einzelnen Batches, während die gemeinsame Spalte zeigt, wie die Dokumente miteinander verglichen werden. Für kleine Kanzleien und Teams, die dieselbe Kontrolle ohne einen vollständigen Überprüfungstag benötigen, ist der Batch-Klausel-Extraktionsworkflow in kleinen Anwaltskanzleien dieselbe Pipeline mit geringerem Volumen.

Was ein Abgleich für Sie dennoch nicht entscheiden kann

Ein Ausnahmeb ericht grenzt die Überprüfung ein, ersetzt sie jedoch nicht. Steht in der Anlage ein Betrag und in der operativen Klausel ein anderer, kann das Tool auf beide Lesarten hinweisen, aber welches Dokument maßgeblich ist, ist eine Formulierungs- und Verhandlungsfrage, die einem Anwalt obliegt. Eine Schreibvariante zwischen „Acme Logistics Ltd." und „Acme Logistics, Inc." kann ein echter Fehler oder eine legitime Namensänderung sein, und der Unterschied ist von Bedeutung. Und ob eine Klausel eine Verpflichtung oder ein Ermessen, eine Obergrenze oder eine Untergrenze darstellt, ist eine Auslegung, die keine Spaltenprüfung vornimmt.

Selbst die größten Plattformen behandeln die Verifizierung auf diese Weise. Ironclads eigene Dokumentation zu KI-vorgeschlagenen Vertragsmetadaten stellt klar fest, dass KI-Vorhersagen „nicht garantiert vollkommen genau sein können; wir empfehlen, Ihre Aufzeichnungen zu verifizieren, wenn Ihr Unternehmen vollständige Genauigkeit erfordert" (Ironclad Support). Das Produktdesign, das aus der Reddit-Konversation hervorging, ist in Bezug auf dieselbe Grenze ehrlich: Das Tool zeigt Wertabweichungen und Entitätsabweichungen auf, und das Urteil bleibt bei den Prüfern.

Das Ziel ist nicht, den Anwalt aus dem Prozess zu automatisieren. Es geht darum, den Prozess auf die Felder zu reduzieren, die tatsächlich abweichen, sodass die acht wirklich unsicheren Werte die Überprüfungsstunden erhalten statt aller achtundvierzig.

FAQ

Kann ein einziges Tool wirklich Vertragsdaten über verschiedene Dokumente hinweg vergleichen?

Ja, in dem Sinne, der zählt: Definieren Sie dieselben Spaltennamen für jedes Dokument im Dokumentensatz, laden Sie sie als einen Batch hoch, und jede Vereinbarung wird zu einer Zeile in derselben Tabelle. Jedes Feld, das in mehreren Dokumenten erscheint, liegt dann in einer Spalte, wo eine Sortierung oder eine Tabellenformel zeigt, welche Zeilen abweichen. Das Tool gleicht die Werte ab; es entscheidet nicht, welches Dokument maßgeblich ist.

Welche Arten von Abweichungen deckt die dokumentübergreifende Prüfung auf?

Sie deckt Wert- und Entitätsabweichungen auf: Parteinamen, die zwischen Dokumenten abweichen, Daten, die nicht übereinstimmen, Beträge, die in einer Anlage korrekt und in der operativen Klausel falsch sind, sowie Kündigungsfristen, die im Hauptteil und im Zeitplan unterschiedlich angegeben sind. Sie bewertet nicht, ob eine Klausel durchsetzbar ist oder welche Version einer Bedingung maßgeblich ist; diese Fragen bleiben dem Anwalt überlassen.

Ersetzt dies die Prüfung durch den Anwalt?

Nein. Der Ausnahmeb ericht ersetzt den mechanischen Teil der Prüfung, das wiederholte Nachverfolgen derselben Zahl über zwei Dokumente hinweg, und konzentriert die menschliche Aufmerksamkeit auf die Zellen, die abweichen. Die Beurteilung, welcher Wert korrekt ist, ob die Abweichung wesentlich ist und was der Vertrag bedeutet, bleibt juristische Arbeit. Der Reddit-Thread, der diesen Workflow angestoßen hat, forderte genau diese Aufteilung: einen langweiligen Bericht, der besagt, dass vierzig Felder normal aussehen und acht eine menschliche Prüfung benötigen, nicht ein Tool, das für Sie entscheidet.

Wie unterscheidet sich dies von der Prüfung eines einzelnen Extraktions-Batches?

Die Prüfung eines einzelnen Batches überprüft die extrahierte Tabelle selbst: Spaltenausrichtung, Zeilenanzahl, Bereiche und Stichproben gegen die Quelldokumente. Die dokumentübergreifende Prüfung überprüft die Beziehungen zwischen Dokumenten: dieselbe Entität, dasselbe Datum oder derselbe Betrag, der in mehr als einer Vereinbarung vorkommt und abweicht. Eine Tabelle kann eine fehlerfreie Extraktion jedes Dokuments sein und dennoch Widersprüche enthalten, da die Widersprüche zwischen den Dateien liegen, nicht in ihnen. Die beiden Prüfungen laufen in der Praxis zusammen, beantworten jedoch unterschiedliche Fragen.

Wenn Ihr Team das nächste Mal ein Vertragsportfolio in eine Tabellenkalkulation überführt, lautet die Frage nicht, ob die Extraktion korrekt ist. Sondern ob die extrahierten Daten mit sich selbst übereinstimmen, über die Mastervereinbarung, die Anlagen, die Änderungsvereinbarungen und die Verlängerungsschreiben hinweg, und ob die Antworten als kurze Liste von Werten zurückkommen, die eine menschliche Entscheidung benötigen. Diese Liste ist das gesamte Ergebnis. Laden Sie Ihren eigenen Vertragssatz hoch und sehen Sie, wie viele Felder als „prüfungsbedürftig" zurückkommen.

📮 contact email: [email protected]