Schuster Medien e.K. · Bäckerei Böhm GmbH
Contract text (the model got exactly this text)
GEWERBEMIETVERTRAG § 1 Vertragsparteien Schuster Medien e.K. Am Hafen 49, 86171 Augsburg, Deutschland USt-IdNr.: DE230198160 vertreten durch den Inhaber Cengiz Drub – nachfolgend „Vermieter“ genannt – und Bäckerei Böhm GmbH Industriestraße 95, 14722 Potsdam Handelsregister: 145/591/47164 USt-IdNr.: DE716683735 vertreten durch den Geschäftsführer Oliver Johann – nachfolgend „Mieter“ genannt – § 2 Vertragsgegenstand Der Vermieter vermietet dem Mieter Büroflächen mit einer Größe von ca. 299 m² im 3. Obergeschoss des Gebäudes Am Hafen 49, 86171 Augsburg, Deutschland (nachfolgend „Mietobjekt“) zur gewerblichen Nutzung. § 3 Vergütung und Zahlung (1) Die Miete beträgt jährlich EUR 3.340,00 netto zzgl. der gesetzlichen Umsatzsteuer von derzeit 19 % (brutto EUR 3.974,60). (2) Die Miete ist jeweils im Voraus, spätestens am dritten Werktag des Zahlungszeitraums, zu zahlen. (3) Gerät der Mieter mit einer Zahlung in Verzug, schuldet er eine Vertragsstrafe von 0,1 % des offenen Betrags je Tag des Verzugs. § 4 Laufzeit und Kündigung (1) Dieser Vertrag tritt mit Unterzeichnung durch beide Vertragsparteien in Kraft. (2) Der Vertrag wird für eine feste Laufzeit bis zum 30. Juni 2026 geschlossen. (3) Es gilt eine sechsmonatige Kündigungsfrist zum Ende eines Kalendermonats; die Kündigung bedarf der Schriftform. (4) Das Recht zur außerordentlichen Kündigung aus wichtigem Grund bleibt unberührt. § 5 Vertraulichkeit (1) Die Vertragsparteien verpflichten sich, alle vertraulichen Informationen der jeweils anderen Partei streng geheim zu halten. (2) Für jeden Fall der schuldhaften Zuwiderhandlung zahlt die verletzende Partei eine Vertragsstrafe in Höhe von 500,00 €. § 6 Schlussbestimmungen (1) Es gilt das Recht der Bundesrepublik Deutschland. (2) Ausschließlicher Gerichtsstand ist Bad Kissingen. (3) Änderungen und Ergänzungen dieses Vertrages bedürfen der Schriftform. (4) Sollte eine Bestimmung dieses Vertrages unwirksam sein, bleibt die Wirksamkeit der übrigen Bestimmungen unberührt. Ort, Datum: Bad Kissingen, 29.06.2025 Vermieter: ____________________ Mieter: ____________________
Verdict
Cheapest without an error: GPT-6 Luna at $0.31 per 1,000 documents.
- GPT-6 Sol is also error-free but 18.3× more expensive.
- Gemma 4 31B is 1.4× cheaper, but: number format (Late-payment penalty (% per day)).
- Mistral Small 4 is 1.2× cheaper, but: invented value (Provider ID).
Prompt given to every model
Extrahieren Sie die wesentlichen Bedingungen des nachstehenden Vertrages und geben Sie nur JSON mit diesen Schlüsseln zurück:
provider_name die leistende Partei (Auftragnehmer, Verkäufer, Vermieter, Lizenzgeber),
genau wie angegeben, einschließlich der Rechtsform
provider_id Registernummer dieser Partei (z. B. Handelsregisternummer), sofern angegeben
client_name die zahlende Partei (Auftraggeber, Käufer, Mieter, Lizenznehmer)
client_id Registernummer dieser Partei, sofern angegeben
contract_type einer der Werte: services, supply, lease, license, maintenance
price vereinbarter Preis ohne Umsatzsteuer (Zahl)
currency Währungscode nach ISO 4217 (EUR, CHF, USD, …)
price_period einer der Werte: one_time, monthly, yearly
effective_date Datum des Inkrafttretens des Vertrages (YYYY-MM-DD)
end_date Ende einer festen Laufzeit (YYYY-MM-DD); null, wenn der Vertrag auf
unbestimmte Zeit geschlossen ist
notice_period_months Kündigungsfrist in Monaten (Zahl); null, wenn es keine gibt
penalty_pct_per_day Vertragsstrafe für Zahlungsverzug in Prozent des offenen Betrags pro Tag
(z. B. 0.05 für 0,05 %); null, wenn es keine gibt
governing_law Ländercode des anwendbaren Rechts nach ISO 3166 (z. B. DE); US-Bundesstaaten
als US-XX
Regeln:
- Relative Daten („mit Unterzeichnung“, „zum Ersten des folgenden Monats“) bezogen auf das
Datum der Unterzeichnung umrechnen.
- Das Datum der Unterzeichnung ist nicht das Datum des Inkrafttretens, sofern der Vertrag dies
nicht ausdrücklich bestimmt.
- Anzahlung, Kaution und feste Vertragsstrafen für andere Verstöße sind weder der Preis noch die
Vertragsstrafe für Zahlungsverzug.
- Steht ein Wert nicht im Vertrag, null zurückgeben. Nicht raten.
- Beträge als Zahlen mit Dezimalpunkt, ohne Tausendertrennzeichen und ohne Währungssymbol.
How we score
Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.
What each model extracted
| Field | Correct value | Gemma 4 31B12 / 13 fields | Mistral Small 412 / 13 fields | GPT-6 Luna13 / 13 fields | Qwen3.8 Flash13 / 13 fields | Gemini 3.5 Flash Lite13 / 13 fields | DeepSeek V4.1 Flash13 / 13 fields | Mistral Medium 3.513 / 13 fields | Gemini 3.8 Flash13 / 13 fields | GPT-6 Sol13 / 13 fields | Claude Sonnet 512 / 13 fields |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Provider | Schuster Medien e.K. | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) | Schuster Medien e.K. (correct) |
| Provider ID | — | — (correct) | DE230198160invented value | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | DE230198160invented value |
| Client | Bäckerei Böhm GmbH | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) | Bäckerei Böhm GmbH (correct) |
| Client ID | 145/591/47164 | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) | 145/591/47164 (correct) |
| Contract type | lease | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) |
| Price (net) | 3340.00 | 3340.00 (correct) | 3340.00 (correct) | 3340.00 (correct) | 3340.00 (correct) | 3340.00 (correct) | 3340.00 (correct) | 3340 (correct) | 3340.00 (correct) | 3340.00 (correct) | 3340.00 (correct) |
| Currency | EUR | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) |
| Billing period | yearly | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) |
| Effective date | 2025-06-29 | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) | 2025-06-29 (correct) |
| End date | 2026-06-30 | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) | 2026-06-30 (correct) |
| Notice period (months) | 6 | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) | 6 (correct) |
| Late-payment penalty (% per day) | 0.10 | 0.00number format | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) | 0.10 (correct) |
| Governing law | DE | DE (correct) | DE (correct) | DE (correct) | DE (correct) | DE (correct) | DE (correct) | DE (correct) | DE (correct) | DE (correct) | DE (correct) |
| Tokens | input / output | 1,190 / 156 | 1,153 / 159 | 1,234 / 315 | 1,544 / 707 | 1,178 / 182 | 1,576 / 1,161 | 1,153 / 148 | 1,178 / 713 | 1,234 / 262 | 2,052 / 242 |
| of which hidden reasoning | billed as output | 0 | 0 | 164 | 533 | 0 | 959 | 0 | 531 | 150 | 37 |
| of which from cache | input billed at a discount | 534 | 0 | 0 | 768 | 0 | 794 | 419 | 0 | 0 | 0 |
| Cost of this document | this run | $0.0002 | $0.0003 | $0.0003 | $0.0005 | $0.0008 | $0.0009 | $0.0028 | $0.0036 | $0.0057 | $0.0065 |
| Per 1,000 documents | for the same kind of document | $0.23 | $0.27 | $0.31 | $0.46 | $0.81 | $0.94 | $2.84 | $3.56 | $5.70 | $6.52 |
| Latency | this run | 2 s | 1.2 s | 3.4 s | 13.4 s | 1 s | 11.3 s | 1.3 s | 4.2 s | 4.7 s | 3.2 s |