Möller GmbH & Co. KG · Schreinerei Kaiser GmbH
Contract text (the model got exactly this text)
KAUFVERTRAG § 1 Vertragsparteien Möller GmbH & Co. KG Dieselstraße 115, 33190 Bielefeld USt-IdNr.: DE771638518 – nachfolgend „Verkäufer“ genannt – und Schreinerei Kaiser GmbH Am Markt 87, 28462 Bremen Handelsregister: 72 110 53838 USt-IdNr.: DE541390594 vertreten durch den Geschäftsführer Paolo Gunpf – nachfolgend „Käufer“ genannt – § 2 Begriffsbestimmungen (1) „Vertrag“ bezeichnet diesen Vertrag einschließlich aller Anlagen. (2) „Vertrauliche Informationen“ sind alle nicht öffentlich bekannten geschäftlichen und technischen Informationen. (3) „Werktag“ ist jeder Tag von Montag bis Freitag mit Ausnahme gesetzlicher Feiertage. § 3 Vertragsgegenstand Der Verkäufer verpflichtet sich, dem Käufer die in Anlage 1 näher bezeichneten Büromöbel zu liefern und ihm das Eigentum daran zu verschaffen; der Käufer verpflichtet sich, die Ware abzunehmen. § 4 Vergütung und Zahlung (1) Der Kaufpreis beträgt 60.970,00 € netto zzgl. 19 % USt.. (2) Rechnungen sind innerhalb von 14 Tagen nach Rechnungsdatum ohne Abzug zahlbar. § 5 Inkrafttreten Dieser Vertrag tritt zum Ersten des auf die Unterzeichnung folgenden Kalendermonats in Kraft. § 6 Vertraulichkeit Die Vertragsparteien verpflichten sich, alle vertraulichen Informationen der jeweils anderen Partei streng geheim zu halten. § 7 Schlussbestimmungen (1) Dieser Vertrag unterliegt österreichischem Recht unter Ausschluss der Verweisungsnormen des internationalen Privatrechts. (2) Die Anwendung des UN-Kaufrechts (CISG) ist ausgeschlossen. (3) Änderungen und Ergänzungen dieses Vertrages bedürfen der Schriftform. (4) Sollte eine Bestimmung dieses Vertrages unwirksam sein, bleibt die Wirksamkeit der übrigen Bestimmungen unberührt. Ort, Datum: Roth, 18.04.2026 Verkäufer: ____________________ Käufer: ____________________
Verdict
Cheapest without an error: Gemma 4 31B at $0.21 per 1,000 documents.
- Claude Sonnet 5 is also error-free but 34.1× more expensive.
- Mistral Small 4 is 1.2× cheaper, but: invented value (Provider ID).
Prompt given to every model
Extrahieren Sie die wesentlichen Bedingungen des nachstehenden Vertrages und geben Sie nur JSON mit diesen Schlüsseln zurück:
provider_name die leistende Partei (Auftragnehmer, Verkäufer, Vermieter, Lizenzgeber),
genau wie angegeben, einschließlich der Rechtsform
provider_id Registernummer dieser Partei (z. B. Handelsregisternummer), sofern angegeben
client_name die zahlende Partei (Auftraggeber, Käufer, Mieter, Lizenznehmer)
client_id Registernummer dieser Partei, sofern angegeben
contract_type einer der Werte: services, supply, lease, license, maintenance
price vereinbarter Preis ohne Umsatzsteuer (Zahl)
currency Währungscode nach ISO 4217 (EUR, CHF, USD, …)
price_period einer der Werte: one_time, monthly, yearly
effective_date Datum des Inkrafttretens des Vertrages (YYYY-MM-DD)
end_date Ende einer festen Laufzeit (YYYY-MM-DD); null, wenn der Vertrag auf
unbestimmte Zeit geschlossen ist
notice_period_months Kündigungsfrist in Monaten (Zahl); null, wenn es keine gibt
penalty_pct_per_day Vertragsstrafe für Zahlungsverzug in Prozent des offenen Betrags pro Tag
(z. B. 0.05 für 0,05 %); null, wenn es keine gibt
governing_law Ländercode des anwendbaren Rechts nach ISO 3166 (z. B. DE); US-Bundesstaaten
als US-XX
Regeln:
- Relative Daten („mit Unterzeichnung“, „zum Ersten des folgenden Monats“) bezogen auf das
Datum der Unterzeichnung umrechnen.
- Das Datum der Unterzeichnung ist nicht das Datum des Inkrafttretens, sofern der Vertrag dies
nicht ausdrücklich bestimmt.
- Anzahlung, Kaution und feste Vertragsstrafen für andere Verstöße sind weder der Preis noch die
Vertragsstrafe für Zahlungsverzug.
- Steht ein Wert nicht im Vertrag, null zurückgeben. Nicht raten.
- Beträge als Zahlen mit Dezimalpunkt, ohne Tausendertrennzeichen und ohne Währungssymbol.
How we score
Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.
What each model extracted
| Field | Correct value | Mistral Small 412 / 13 fields | Gemma 4 31B13 / 13 fields | GPT-6 Luna13 / 13 fields | DeepSeek V4.1 Flash12 / 13 fields | Gemini 3.5 Flash Lite12 / 13 fields | Gemini 3.8 Flash13 / 13 fields | Qwen3.8 Flash13 / 13 fields | Mistral Medium 3.512 / 13 fields | GPT-6 Sol13 / 13 fields | Claude Sonnet 513 / 13 fields |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Provider | Möller GmbH & Co. KG | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) | Möller GmbH & Co. KG (correct) |
| Provider ID | — | DE771638518invented value | — (correct) | — (correct) | DE771638518invented value | DE771638518invented value | — (correct) | — (correct) | DE771638518invented value | — (correct) | — (correct) |
| Client | Schreinerei Kaiser GmbH | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) | Schreinerei Kaiser GmbH (correct) |
| Client ID | 72 110 53838 | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) | 72 110 53838 (correct) |
| Contract type | supply | supply (correct) | supply (correct) | supply (correct) | supply (correct) | supply (correct) | supply (correct) | supply (correct) | supply (correct) | supply (correct) | supply (correct) |
| Price (net) | 60970.00 | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) | 60970.00 (correct) |
| Currency | EUR | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) |
| Billing period | one_time | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) | one_time (correct) |
| Effective date | 2026-05-01 | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) | 2026-05-01 (correct) |
| End date | — | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) |
| Notice period (months) | — | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) |
| Late-payment penalty (% per day) | — | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) |
| Governing law | AT | AT (correct) | AT (correct) | AT (correct) | AT (correct) | AT (correct) | AT (correct) | AT (correct) | AT (correct) | AT (correct) | AT (correct) |
| Tokens | input / output | 1,015 / 149 | 1,059 / 144 | 1,125 / 254 | 1,461 / 527 | 1,047 / 181 | 1,047 / 448 | 1,419 / 1,293 | 1,015 / 149 | 1,125 / 153 | 1,876 / 327 |
| of which hidden reasoning | billed as output | 0 | 0 | 145 | 399 | 0 | 277 | 1,131 | 0 | 44 | 134 |
| of which from cache | input billed at a discount | 467 | 532 | 0 | 790 | 0 | 0 | 1,280 | 0 | 0 | 0 |
| Cost of this document | this run | $0.0002 | $0.0002 | $0.0003 | $0.0005 | $0.0008 | $0.0025 | $0.0026 | $0.0026 | $0.0043 | $0.0070 |
| Per 1,000 documents | for the same kind of document | $0.18 | $0.21 | $0.27 | $0.50 | $0.77 | $2.47 | $2.64 | $2.64 | $4.34 | $7.02 |
| Latency | this run | 1.3 s | 1.9 s | 2.8 s | 5.5 s | 1 s | 2.2 s | 22.4 s | 1.7 s | 3.4 s | 4.2 s |