ModelVerdict

Susanne Couturier

FrancésTexto7 campos

Documento fr-p0027 · diseño minutes · 7 campos · parte pública del conjunto de datos · La misma factura en otro idioma: Inglés (EE. UU.) → · Informar de un error en este ejemplo

Texto (el modelo recibió exactamente este texto)

Compte rendu de réunion

Présents : Susanne Couturier, Marc Paris
Pour le fournisseur : Julien, RCS Nantes 806 800 686, TVA intracommunautaire : FR64806800686

1. Le budget du prochain trimestre a été approuvé sans objection.
2. Susanne Couturier prépare une comparaison des offres pour la prochaine réunion.
3. Marc Paris vérifie les délais de livraison.
Compte rendu également envoyé à office@julien.example.

Veredicto

El más barato sin errores: Gemma 4 31B, a 0,09 € por cada 1000 documentos.

  • Gemini 3.8 Flash tampoco comete errores, pero es 24,3× más caro.
  • Mistral Small 4 es 1,7× más barato, pero: valor inventado (Nombres).

Prompt enviado a todos los modelos

Trouvez dans le texte ci-dessous toutes les données personnelles de personnes physiques (en vue de l'anonymisation) et renvoyez uniquement du JSON
avec ces clés, chacune sous forme de liste de chaînes (une liste vide s'il n'y en a pas) :

person_names       noms complets des personnes, chaque personne une seule fois, tels qu'écrits dans le texte
email_addresses    adresses e-mail des personnes
phone_numbers      numéros de téléphone des personnes, tels qu'écrits dans le texte
postal_addresses   adresses personnelles ou de livraison des personnes, telles qu'écrites dans le texte (rue, ville, code postal)
birth_dates        dates de naissance (YYYY-MM-DD)
national_ids       numéros d'identification nationaux (p. ex. numéro de sécurité sociale)
bank_accounts      numéros de compte bancaire (IBAN) des personnes, tels qu'écrits dans le texte

Règles :
- Uniquement les données de personnes physiques. Les noms de sociétés, les numéros RCS, SIREN et SIRET, les numéros de TVA
  et autres numéros de sociétés, les adresses génériques de sociétés comme info@ ou support@, les numéros de commande et de
  ticket ne sont pas des données personnelles : omettez-les.
- Les dates qui ne sont pas des dates de naissance (réunions, livraisons, embauche) ne sont pas des données personnelles.
- N'inventez et ne complétez aucune valeur ; reprenez-les du texte.

Cómo puntuamos

Coincidencia exacta por campo tras normalizar fechas, importes y espacios. La falta de diacríticos cuenta como error. El coste es el gasto real en tokens de esta ejecución, convertido al tipo de cambio indicado en el pie de página.

Lo que extrajo cada modelo

CampoValor correctoMistral Small 46 / 7 camposGemma 4 31B7 / 7 camposGPT-6 Luna6 / 7 camposGemini 3.5 Flash Lite6 / 7 camposDeepSeek V4.1 Flash7 / 7 camposQwen3.8 Flash7 / 7 camposMistral Medium 3.56 / 7 camposGPT-6 Sol7 / 7 camposGemini 3.8 Flash7 / 7 camposClaude Sonnet 56 / 7 campos
NombresSusanne Couturier; Marc Paris Susanne Couturier; Marc Paris; Julienvalor inventadoSusanne Couturier; Marc Paris (correcto) Susanne Couturier; Marc Paris; Julienvalor inventado Susanne Couturier; Marc Paris; Julienvalor inventadoSusanne Couturier; Marc Paris (correcto)Susanne Couturier; Marc Paris (correcto) Susanne Couturier; Marc Paris; Julienvalor inventadoSusanne Couturier; Marc Paris (correcto)Susanne Couturier; Marc Paris (correcto) Susanne Couturier; Marc Paris; Julienvalor inventado
Direcciones de correo—— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)
Teléfonos—— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)
Direcciones—— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)
Fechas de nacimiento—— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)
Números de identificación—— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)
Cuentas bancarias—— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)— (correcto)
Tokensentrada / salida456 / 55476 / 77560 / 147464 / 82755 / 488774 / 1083456 / 59560 / 85464 / 5391308 / 87
de ellos, razonamiento ocultose factura como salida0097043610110384630
de ellos, desde cachéentrada con descuento315361005145120000
Coste de este documentoesta ejecución0,0001 €0,0001 €0,0001 €0,0003 €0,0003 €0,0005 €0,0010 €0,0018 €0,0022 €0,0032 €
Por cada 1000 documentospara el mismo tipo de documento0,05 €0,09 €0,12 €0,32 €0,35 €0,51 €1,04 €1,81 €2,18 €3,21 €
Latenciaesta ejecución1,3 s3,5 s2,7 s0,6 s6 s23,9 s1,3 s4,6 s2,7 s2,2 s