Dörthe Käster
Text (the model got exactly this text)
Personalbogen – Rose GmbH Mitarbeiterin: Dörthe Käster Geburtsdatum: 02.12.1960 Wohnanschrift: Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn Telefon: 0152/2912 5809 Private E-Mail: doerthe.kaester@mail.example Gehaltskonto (IBAN): DE82140916853082883334 Einstellung als Buchhalterin, Probezeit 6 Monate. Vorgesetzter: Klaus Binner. Arbeitgeber: Rose GmbH, Amtsgericht München, HRB 58328, USt-IdNr.: DE312776995
Verdict
Cheapest without an error: Gemma 4 31B at $0.13 per 1,000 documents.
- Claude Sonnet 5 is also error-free but 36.9× more expensive.
Prompt given to every model
Finden Sie im Text unten alle personenbezogenen Daten natürlicher Personen (zur Anonymisierung) und geben Sie nur JSON mit diesen Schlüsseln zurück, jeweils als Liste von Zeichenketten (eine leere Liste, wenn es keine gibt): person_names vollständige Namen von Personen, jede Person einmal, wie im Text geschrieben email_addresses E-Mail-Adressen von Personen phone_numbers Telefonnummern von Personen, wie im Text geschrieben postal_addresses Wohn- oder Lieferadressen von Personen, wie im Text geschrieben (Straße, Ort, PLZ) birth_dates Geburtsdaten (YYYY-MM-DD) national_ids nationale Identifikationsnummern (z. B. Steuer-ID, Sozialversicherungsnummer) bank_accounts Bankkontonummern (IBAN) von Personen, wie im Text geschrieben Regeln: - Nur Daten natürlicher Personen. Firmennamen, Handelsregisternummern, USt-IdNr. und andere Nummern von Firmen, allgemeine Firmenadressen wie info@ oder support@, Bestell- und Ticketnummern sind keine personenbezogenen Daten: lassen Sie sie weg. - Daten, die kein Geburtsdatum sind (Besprechungen, Lieferungen, Eintritt), sind keine personenbezogenen Daten. - Erfinden oder ergänzen Sie keine Werte; übernehmen Sie sie aus dem Text.
How we score
Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.
What each model extracted
| Field | Correct value | Gemma 4 31B7 / 7 fields | GPT-6 Luna7 / 7 fields | Mistral Small 47 / 7 fields | DeepSeek V4.1 Flash7 / 7 fields | Qwen3.8 Flash7 / 7 fields | Gemini 3.5 Flash Lite7 / 7 fields | Mistral Medium 3.57 / 7 fields | Gemini 3.8 Flash7 / 7 fields | GPT-6 Sol7 / 7 fields | Claude Sonnet 57 / 7 fields |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Names | Dörthe Käster; Klaus Binner | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) | Dörthe Käster; Klaus Binner (correct) |
| Email addresses | doerthe.kaester@mail.example | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) | doerthe.kaester@mail.example (correct) |
| Phone numbers | 0152/2912 5809 | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) | 0152/2912 5809 (correct) |
| Addresses | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) | Nathalie-auch Schlauchin-Weg 3627, 06439 Mühldorf am Inn (correct) |
| Dates of birth | 1960-12-02 | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) | 1960-12-02 (correct) |
| National IDs | — | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) |
| Bank accounts | DE82140916853082883334 | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) | DE82140916853082883334 (correct) |
| Tokens | input / output | 506 / 144 | 568 / 181 | 499 / 141 | 749 / 459 | 800 / 754 | 494 / 198 | 499 / 142 | 494 / 550 | 568 / 143 | 1,405 / 193 |
| of which hidden reasoning | billed as output | 0 | 73 | 0 | 345 | 563 | 0 | 0 | 420 | 35 | 32 |
| of which from cache | input billed at a discount | 311 | 0 | 0 | 460 | 512 | 0 | 0 | 0 | 0 | 0 |
| Cost of this document | this run | $0.0001 | $0.0001 | $0.0002 | $0.0004 | $0.0004 | $0.0006 | $0.0018 | $0.0024 | $0.0026 | $0.0047 |
| Per 1,000 documents | for the same kind of document | $0.13 | $0.15 | $0.16 | $0.37 | $0.41 | $0.64 | $1.81 | $2.43 | $2.57 | $4.74 |
| Latency | this run | 2.4 s | 2.4 s | 1.4 s | 4 s | 13.4 s | 1 s | 1.1 s | 2.6 s | 3.1 s | 4.8 s |