Catherine Dubois EI · FAC-2025-00139

FrenchPDF text13 fields

Document fr-p0033 · layout fr-L05 · 13 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

PDF text layer (the model received only this text)

VENDEUR
Catherine Dubois EI                                                   Facture
92, chemin des Vignes
37100 TOURS
                                                                      N° FAC-2025-00139
SIRET : 824 013 866 00051
                                                                      Date                12/04/2025
ACHETEUR                                                              Échéance            26/04/2025
Novadata SAS
176 avenue du Maréchal Leclerc                                        Conditions de      14 jours net, date de
30000 NÎMES                                                           paiement           facture
France                                                                Domiciliation      Société Générale
SIREN : 966 434 128
                                                                      IBAN               FR76 3000 3001 4314 7859
N° TVA : FR41966434128                                                                   7445 145
                                                                      BIC                SOGEFRPPXXX



Désignation                                                      Qté Unité              Prix unitaire        Montant
Cartouche de toner noir compatible                                 1 u.                        48,99              48,99
Révision véhicule avec vidange                                     1 forfait                  165,50             165,50
Forfait déplacement                                                1 forfait                   68,18              68,18
Vis à bois 4 × 40 mm, boîte de 200                                10 boîte                      7,90              79,00

TVA non applicable, art. 293 B du CGI.
Pas d'escompte pour paiement anticipé. Tout retard de                                 Net à payer : 361,67 €
paiement entraîne de plein droit des pénalités de retard ainsi
qu'une indemnité forfaitaire de 40 € pour frais de
recouvrement.

Verdict

Cheapest without an error: Gemma 4 31B at $0.21 per 1,000 documents.

Claude Sonnet 5 is also error-free but 32.1× more expensive.
Mistral Small 4 is 1.1× cheaper, but: invented value (VAT ID).

Prompt given to every model

Extrayez du document joint les informations suivantes et renvoyez uniquement du JSON avec ces clés :

supplier_name      Nom de l'émetteur de la facture (exactement comme sur le document, accents et forme juridique compris)
supplier_id        Numéro SIRET de l'émetteur (14 chiffres ; ni le numéro de TVA intracommunautaire ni le seul numéro RCS)
vat_id             Numéro de TVA intracommunautaire de l'émetteur
invoice_number     Numéro du document
payment_reference  Référence à rappeler lors du paiement
issue_date         Date d'émission (YYYY-MM-DD)
tax_point_date     Date de la livraison ou de la prestation de services (YYYY-MM-DD)
due_date           Date d'échéance / « à payer avant le » (YYYY-MM-DD)
net_by_rate        Montant HT par taux de TVA, p. ex. {"20": 18450.00, "5.5": 1200.00}
vat_by_rate        Montant de la TVA par taux, p. ex. {"20": 3690.00}
total              Montant total TTC / net à payer (nombre, négatif pour un avoir)
currency           Devise selon ISO 4217 (EUR, GBP, …)
bank_account       IBAN de l'émetteur

Règles :
- Ne renvoyez aucune information concernant le client, uniquement celles de l'émetteur.
- Si une information ne figure pas sur le document, renvoyez null. N'inventez rien.
- Si le document ne comporte pas de ventilation de la TVA (micro-entreprise, demande d'acompte), renvoyez net_by_rate et vat_by_rate à null.
- Montants sous forme de nombres avec un point décimal, sans séparateur de milliers et sans devise.

How we score

Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.

What each model extracted

Field	Correct value	Mistral Small 411 / 13 fields	Gemma 4 31B13 / 13 fields	GPT-6 Luna12 / 13 fields	DeepSeek V4.1 Flash13 / 13 fields	Gemini 3.5 Flash Lite12 / 13 fields	Qwen3.8 Flash13 / 13 fields	Mistral Medium 3.513 / 13 fields	GPT-6 Sol13 / 13 fields	Gemini 3.8 Flash13 / 13 fields	Claude Sonnet 513 / 13 fields
Supplier	Catherine Dubois EI	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)	Catherine Dubois EI (correct)
Supplier ID (EIN, IČO…)	82401386600051	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)	82401386600051 (correct)
VAT ID	—	FR41966434128invented value	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)
Invoice number	FAC-2025-00139	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)	FAC-2025-00139 (correct)
Payment reference	—	FAC-2025-00139invented value	— (correct)	— (correct)	— (correct)	FAC-2025-00139invented value	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)
Invoice date	2025-04-12	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)	2025-04-12 (correct)
Tax point	—	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)
Due date	2025-04-26	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)	2025-04-26 (correct)
Net by tax rate	—	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)
Tax by rate	—	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)	— (correct)
Total	361.67	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)	361.67 (correct)
Currency	EUR	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)	EUR (correct)
Bank account	FR7630003001431478597445145	FR7630003001431478597445145 (correct)	FR76 3000 3001 4314 7859 7445 145 (correct)	FR7630003001431478597445wrong value	FR76 3000 3001 4314 7859 7445 145 (correct)	FR7630003001431478597445145 (correct)	FR76 3000 3001 4314 7859 7445 145 (correct)	FR7630003001431478597445145 (correct)	FR7630003001431478597445145 (correct)	FR7630003001431478597445145 (correct)	FR7630003001431478597445145 (correct)
Tokens	input / output	862 / 193	896 / 211	905 / 243	1,138 / 993	884 / 216	1,262 / 1,999	862 / 168	905 / 273	884 / 1,075	1,173 / 439
of which hidden reasoning	billed as output	0	0	132	806	0	1,797	0	161	871	246
of which from cache	input billed at a discount	393	442	0	644	0	768	0	0	0	0
Cost of this document	this run	$0.0002	$0.0002	$0.0002	$0.0008	$0.0008	$0.0010	$0.0026	$0.0045	$0.0047	$0.0067
Per 1,000 documents	for the same kind of document	$0.19	$0.21	$0.21	$0.77	$0.81	$1.03	$2.55	$4.54	$4.69	$6.74
Latency	this run	1.8 s	6.3 s	4.8 s	13.6 s	1.1 s	36.3 s	1.6 s	5.6 s	4.3 s	6.3 s