ModelVerdict

Company policy: Ab welchem Datum gilt das Dokument? …

GermanDocument6 fields

Document de-p0002 · layout policy · 6 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Document and questions (the model received exactly this text)

Börner Kaul OHG mbH
RICHTLINIE FÜR DIENSTREISEN, REISEKOSTEN UND MOBILES ARBEITEN

1. Allgemeines
1.1 Diese Richtlinie regelt Dienstreisen, die Erstattung von Auslagen und die mobile Arbeit aller Beschäftigten der Börner Kaul OHG mbH (nachfolgend „Arbeitgeber“).
1.2 Die Richtlinie gilt ab dem 18. Juli 2025 und ersetzt die Richtlinie vom 1. September 2024.
1.3 Ausgaben über 2.500 € sind vorab von der Abteilungsleitung zu genehmigen. Ausgaben über 25.000 € bedürfen zusätzlich der Genehmigung der Geschäftsführung.

2. Dienstreisen
2.1 Jede Dienstreise ist vorab von der direkten Führungskraft zu genehmigen. Beschäftigte können einen Reisekostenvorschuss von bis zu 90 % der voraussichtlichen Kosten beantragen.
2.2 Die Verpflegungspauschale für Inlandsdienstreisen beträgt 15 € je Kalendertag bei einer Abwesenheit von 5 bis 12 Stunden und 30 € je Kalendertag bei einer Abwesenheit von mehr als 12 Stunden.
2.3 Die Übernachtungskosten dürfen 120 € pro Nacht nicht überschreiten, in München 180 € pro Nacht. Teurere Unterkünfte sind nur mit schriftlicher Zustimmung der Abteilungsleitung zulässig.
2.4 Bei Nutzung eines privaten Fahrzeugs erhalten Beschäftigte eine Wegstreckenentschädigung von 0,30 € je gefahrenem Kilometer. Park- und Mautgebühren werden gegen Beleg in tatsächlicher Höhe erstattet.

3. Reisekostenabrechnung
3.1 Die Reisekostenabrechnung ist mit allen Belegen spätestens 15 Arbeitstage nach der Rückkehr einzureichen.
3.2 Genehmigte Beträge erstattet der Arbeitgeber innerhalb von 14 Tagen nach der Genehmigung, in der Regel mit der nächsten Gehaltsabrechnung.
3.3 Fragen zur Abrechnung beantwortet die Buchhaltung unter reisekosten@boerner-kaul.example; Fragen zur Auslegung dieser Richtlinie die Personalabteilung unter personal@boerner-kaul.example.

4. Mobile Arbeit
4.1 Nach Absprache mit der Führungskraft können Beschäftigte an höchstens 1 Tag pro Woche mobil arbeiten.
4.2 Tage mobiler Arbeit sind mindestens 2 Arbeitstage im Voraus im Zeiterfassungssystem einzutragen.
4.3 Beschäftigte sind für die Sicherheit der überlassenen Geräte und der Unternehmensdaten verantwortlich und arbeiten ausschließlich über das VPN des Arbeitgebers. Die Kosten der mobilen Arbeit regelt eine gesonderte Vereinbarung.
4.4 An Tagen mobiler Arbeit müssen Beschäftigte während der üblichen Arbeitszeit telefonisch und per E-Mail erreichbar sein.

---

Fragen:
1. Ab welchem Datum gilt das Dokument? (Datum)
2. Innerhalb von wie vielen Arbeitstagen nach der Rückkehr ist die Reisekostenabrechnung einzureichen? (Anzahl Arbeitstage)
3. Wie hoch dürfen die Übernachtungskosten pro Nacht außerhalb von München höchstens sein? (Betrag in EUR)
4. Wie hoch ist die Verpflegungspauschale je Kalendertag bei einer Inlandsdienstreise mit einer Abwesenheit von mehr als 12 Stunden? (Betrag in EUR)
5. Wie viele Arbeitstage im Voraus sind Tage mobiler Arbeit einzutragen? (Anzahl Arbeitstage)
6. Wie hoch ist die Obergrenze für eine einzelne Taxifahrt auf einer Dienstreise? (Betrag in EUR)

Verdict

Cheapest with no errors: GPT-6 Luna at $0.18 per 1,000 documents.

  • Claude Sonnet 5.5 is also error-free, but 29.8× more expensive.

Prompt given to every model

Sie beantworten Fragen zu einem Geschäftsdokument. Unter dem Dokument stehen sechs nummerierte
Fragen. Beantworten Sie jede Frage ausschließlich anhand des Dokumenttextes und geben Sie nur JSON
mit den Schlüsseln q1 bis q6 zurück (q1 = Antwort auf Frage 1 usw.).

Regeln:
- Jede Frage nennt in Klammern die Einheit oder das Format der Antwort. Antworten Sie in dieser
  Einheit.
- Anzahlen (Tage, Monate, Stunden) und Prozentsätze als Zahl ohne Einheit und ohne %-Zeichen,
  z. B. "14" oder "0.05".
- Beträge als Zahl mit Dezimalpunkt, ohne Tausendertrennzeichen und ohne Währungssymbol,
  z. B. "1500.00".
- Datumsangaben im Format YYYY-MM-DD.
- Zeiträume im 24-Stunden-Format HH:MM-HH:MM, z. B. "08:00-17:00".
- E-Mail-Adressen genau so, wie sie im Dokument stehen.
- Enthält das Dokument die Antwort auf eine Frage nicht, geben Sie null zurück. Raten Sie nicht und
  ergänzen Sie keine Angaben, die nicht im Dokument stehen.

How we score

Exact match per field after normalizing dates, amounts, and whitespace. Missing diacritics count as an error. Cost is the actual token spend of this run, converted at the rate shown in the footer.

What each model extracted

FieldCorrect valueGPT-6 Luna6 / 6 fieldsGemma 4 31B6 / 6 fieldsMistral Small 46 / 6 fieldsDeepSeek V4.1 Flash6 / 6 fieldsClaude Haiku 5.56 / 6 fieldsQwen3.8 Flash6 / 6 fieldsGLM-5.3 Flash6 / 6 fieldsGemini 3.5 Flash Lite6 / 6 fieldsMistral Medium 3.56 / 6 fieldsGPT-6 Sol6 / 6 fieldsMistral Large 46 / 6 fieldsGemini 3.8 Flash6 / 6 fieldsClaude Sonnet 56 / 6 fieldsClaude Sonnet 5.56 / 6 fields
Question 12025-07-182025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)2025-07-18 (correct)
Question 21515 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)15 (correct)
Question 3120.00120.00 (correct)120.00 (correct)120.00 (correct)120 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)120.00 (correct)
Question 430.0030.00 (correct)30.00 (correct)30 (correct)30 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)30.00 (correct)
Question 522 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)2 (correct)
Question 6—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Tokensinput / output1,095 / 881,124 / 611,101 / 581,340 / 982,450 / 1241,305 / 5021,123 / 3321,112 / 741,101 / 611,095 / 471,115 / 1,4771,112 / 1,1352,448 / 482,450 / 48
including hidden reasoningbilled as output390049764252780001,2821,06100
including cached inputinput billed at a discount030320025600000000
Cost of this documentthis run$0.0002$0.0002$0.0002$0.0003$0.0003$0.0004$0.0005$0.0005$0.0021$0.0032$0.0038$0.0051$0.0054$0.0054
Per 1,000 documentsfor documents of this type$0.18$0.18$0.20$0.29$0.31$0.40$0.50$0.52$2.11$3.21$3.85$5.09$5.38$5.38
Latencythis run2.8 s1.7 s0.7 s4 s1.7 s7.3 s2.4 s0.7 s0.8 s2.7 s30.8 s5 s2.5 s1.9 s

Log in with email

We use your email only to log you in (and for the digest if you tick it). No spam.