Aurore Delaunay
Text (model dostal přesně tento text)
Bonjour, Veuillez trouver ci-joint les documents promis concernant la commande CMD-2026-82445. Nous vous confirmerons la date de livraison dès que possible. Mon collègue Hugues Besson, en copie, prendra contact avec vous. Cordialement Aurore Delaunay Laine, RCS Rennes 946 381 894, TVA intracommunautaire : FR23946381894 E-mail : aurore.delaunay@mail.example
Verdikt
Nejlevnější bez chyby: Mistral Small 4 za 1,52 Kč na 1000 dokladů.
- Claude Sonnet 5 je také bez chyby, ale 54,1× dražší.
Zadání pro všechny modely
Trouvez dans le texte ci-dessous toutes les données personnelles de personnes physiques (en vue de l'anonymisation) et renvoyez uniquement du JSON avec ces clés, chacune sous forme de liste de chaînes (une liste vide s'il n'y en a pas) : person_names noms complets des personnes, chaque personne une seule fois, tels qu'écrits dans le texte email_addresses adresses e-mail des personnes phone_numbers numéros de téléphone des personnes, tels qu'écrits dans le texte postal_addresses adresses personnelles ou de livraison des personnes, telles qu'écrites dans le texte (rue, ville, code postal) birth_dates dates de naissance (YYYY-MM-DD) national_ids numéros d'identification nationaux (p. ex. numéro de sécurité sociale) bank_accounts numéros de compte bancaire (IBAN) des personnes, tels qu'écrits dans le texte Règles : - Uniquement les données de personnes physiques. Les noms de sociétés, les numéros RCS, SIREN et SIRET, les numéros de TVA et autres numéros de sociétés, les adresses génériques de sociétés comme info@ ou support@, les numéros de commande et de ticket ne sont pas des données personnelles : omettez-les. - Les dates qui ne sont pas des dates de naissance (réunions, livraisons, embauche) ne sont pas des données personnelles. - N'inventez et ne complétez aucune valeur ; reprenez-les du texte.
Jak hodnotíme
Přesná shoda pole po sjednocení formátu data, částek a mezer. Chybějící diakritika se počítá jako chyba. Cena je skutečná útrata za tokeny v tomto běhu, přepočtená kurzem k datu v patičce.
Co z dokladu dostal který model
| Pole | Správná hodnota | Mistral Small 47 / 7 polí | Gemma 4 31B7 / 7 polí | GPT-6 Luna7 / 7 polí | DeepSeek V4.1 Flash7 / 7 polí | Qwen3.8 Flash7 / 7 polí | Gemini 3.5 Flash Lite7 / 7 polí | Mistral Medium 3.57 / 7 polí | Gemini 3.8 Flash7 / 7 polí | GPT-6 Sol7 / 7 polí | Claude Sonnet 57 / 7 polí |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Jména | Aurore Delaunay; Hugues Besson | Aurore Delaunay; Hugues Besson (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) | Hugues Besson; Aurore Delaunay (správně) |
| E-mailové adresy | aurore.delaunay@mail.example | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) | aurore.delaunay@mail.example (správně) |
| Telefonní čísla | — | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) |
| Adresy | — | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) |
| Data narození | — | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) |
| Rodná čísla a jiná ID | — | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) |
| Bankovní účty | — | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) | — (správně) |
| Tokeny | vstup / výstup | 461 / 66 | 485 / 97 | 560 / 103 | 747 / 317 | 782 / 644 | 473 / 96 | 461 / 70 | 473 / 382 | 560 / 102 | 1 295 / 99 |
| z toho skryté přemýšlení | plací se jako výstup | 0 | 0 | 44 | 252 | 550 | 0 | 0 | 326 | 27 | 0 |
| z toho z cache | vstup se slevou | 315 | 375 | 0 | 528 | 512 | 0 | 0 | 0 | 0 | 0 |
| Cena tohoto dokladu | tento běh | 0,0015 Kč | 0,0025 Kč | 0,0025 Kč | 0,0060 Kč | 0,0081 Kč | 0,0088 Kč | 0,0280 Kč | 0,0411 Kč | 0,0492 Kč | 0,0823 Kč |
| Za 1000 dokladů | při stejném typu dokladu | 1,52 Kč | 2,45 Kč | 2,47 Kč | 6,01 Kč | 8,08 Kč | 8,78 Kč | 27,98 Kč | 41,11 Kč | 49,22 Kč | 82,34 Kč |
| Odezva | tento běh | 0,8 s | 5,6 s | 1,8 s | 4,6 s | 11,9 s | 0,8 s | 0,8 s | 2,2 s | 4,8 s | 2,2 s |