ModelVerdict

Eugenie Junitz, Gotthilf Reising, Paul Hermighausen

GermanDocument6 fields

Document de-p0028 · layout minutes · 6 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Document text (the model received exactly this text)

Protokoll der Projektbesprechung – Kundenportal

Datum: 04.03.2026, 9:00–10:30 Uhr
Ort: Besprechungsraum C101
Teilnehmende: Gabriele Tschentscher, Eugenie Junitz, Gotthilf Reising, Paul Hermighausen, Anne-Kathrin Röhricht
Protokoll: Anne-Kathrin Röhricht
Seitenzahl: 4

Tagesordnung:
TOP 1: Marketingkampagne
TOP 2: Büroumbau
TOP 3: Externe Beratung
TOP 4: Zeitplan
TOP 5: Aufgaben und Sonstiges

Frau Tschentscher eröffnete die Besprechung, begrüßte die Anwesenden und fasste den Projektstand kurz zusammen. Die meisten Arbeiten laufen planmäßig, Hauptthema der Besprechung war das Budget.

TOP 1: Marketingkampagne
Herr Hermighausen schlug vor, 32.000 EUR für die Herbstkampagne im Marketing einzuplanen, da der Leistungsumfang gegenüber dem ursprünglichen Auftrag gewachsen sei. Frau Tschentscher wies darauf hin, dass das Projektbudget einen so hohen Betrag nicht trägt. Der Vorschlag über 32.000 EUR wurde in der Abstimmung abgelehnt (2 dafür, 5 dagegen). Anschließend genehmigte das Team 22.000 EUR für die Herbstkampagne im Marketing.

TOP 2: Büroumbau
Herr Reising stellte die Angebote von drei Anbietern vor und empfahl das wirtschaftlichste. Zum Vergleich: Im Vorjahr kostete dieselbe Position 10.500 EUR. Das Team genehmigte 14.000 EUR für den Umbau der Büros im zweiten Stock.

TOP 3: Externe Beratung
Ohne weitere Diskussion genehmigt: 5.500 EUR für externe Berater zur Prozessanalyse.

TOP 4: Zeitplan
Der ursprüngliche Termin für die Vertragsunterzeichnung mit dem Lieferanten, der 18.04.2026, ist nicht zu halten, weil der Lieferant den überarbeiteten Vertragsentwurf noch nicht geschickt hat. Das Team einigte sich auf den neuen Termin 10.05.2026; der ursprüngliche Termin 18.04.2026 entfällt damit. Alle anderen Termine bleiben unverändert. Frau Tschentscher dankte Frau Röhricht für den Hinweis, dass die betroffenen Abteilungen informiert werden müssen.

TOP 5: Aufgaben und Sonstiges
Aufgaben:
- Eugenie Junitz: Vertrag mit dem Lieferanten vorbereiten und unterzeichnen, Frist: 10.05.2026
- Gotthilf Reising: Hardware bestellen und Installation organisieren, Frist: 25.05.2026
- Paul Hermighausen: Kampagne starten und Inhalte für die Website vorbereiten, laufend

Nächste Besprechung: 11.03.2026, gleicher Raum. Anmerkungen zum Protokoll bitte innerhalb von zwei Arbeitstagen.

Verdict

Cheapest with no errors: Gemma 4 31B at $0.19 per 1,000 documents.

  • Claude Sonnet 5 is also error-free, but 35× more expensive.

Prompt given to every model

Fassen Sie das unten stehende Dokument (Besprechungsprotokoll, Projektstatusbericht oder
E-Mail-Verlauf) in höchstens 80 Wörtern zusammen.

Regeln:
- Nennen Sie alle endgültigen Entscheidungen: die genehmigten Beträge, die geltenden Termine und
  die für die Aufgaben verantwortlichen Personen (mit vollem Namen).
- Erwähnen Sie keine abgelehnten Vorschläge und deren Beträge und keine Termine, die geändert
  wurden (die ursprünglichen Termine); nennen Sie nur die geltenden Termine.
- Übernehmen Sie Beträge und Daten genau wie im Dokument, runden Sie sie nicht.
- Schreiben Sie in der Sprache des Dokuments, sachlich und in formellem Stil, als Fließtext ohne
  Überschriften.
- Geben Sie nur JSON in der Form {"summary": "…"} zurück.

How we score

Exact match per field after normalizing dates, amounts, and whitespace. Missing diacritics count as an error. Cost is the actual token spend of this run, converted at the rate shown in the footer.

Free with login

Every model's output for this document, field by field. The first three examples of each task are open.

Just your email, no password.

Log in with email

We use your email only to log you in (and for the digest if you tick it). No spam.