ModelVerdict

Christiane Martin EI · FAC-2025-00624

FrenchPDF text13 fields

Document fr-p0005 · layout fr-L07 · 13 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

PDF text layer (the model received only this text)

                                                                          F acture
                                                                     N° FAC-2025-00624

 Émetteur :                                                                           Destinataire :
 Christiane Martin EI                                                                 Atlanlog SASU
 146 avenue du Maréchal Leclerc                                                       16 rue des Frères Lumière
 45000 Orléans                                                                        25000 Besançon
 SIRET : 540 010 980 00055

 Date d'émission                                           18.05.2025
 Date d'échéance                                           01.06.2025

 Désignation                                                                            Qté Unité                             Prix unitaire           Montant
 Vis à bois 4 × 40 mm, boîte de 200                                                        1 boîte                                      9,00                9,00
 Forfait déplacement                                                                       2 forfait                                   61,00            122,00

                                                                                                                           Net à payer : 131,00 EUR
 Conditions de paiement                                  14 jours net, date de facture
 Titulaire du compte                                     Christiane Martin EI
 Domiciliation                                           Société Générale
 IBAN                                                    FR76 3000 3021 6400 0096 0033 137
 BIC                                                     SOGEFRPPXXX
 Référence à rappeler                                    FAC-2025-00624
TVA non applicable, art. 293 B du CGI.
Pas d'escompte pour paiement anticipé. Tout retard de paiement entraîne de plein droit des pénalités de retard ainsi qu'une indemnité forfaitaire de 40 € pour
frais de recouvrement.
Entrepreneur individuel – Dispensé d'immatriculation au registre du commerce et des sociétés (RCS) et au répertoire des métiers (RM)


Bon pour accord, le ____________________


Verdict

Cheapest without an error: Mistral Small 4 at $0.18 per 1,000 documents.

  • Claude Sonnet 5 is also error-free but 45.2× more expensive.

Prompt given to every model

Extrayez du document joint les informations suivantes et renvoyez uniquement du JSON avec ces clés :

supplier_name      Nom de l'émetteur de la facture (exactement comme sur le document, accents et forme juridique compris)
supplier_id        Numéro SIRET de l'émetteur (14 chiffres ; ni le numéro de TVA intracommunautaire ni le seul numéro RCS)
vat_id             Numéro de TVA intracommunautaire de l'émetteur
invoice_number     Numéro du document
payment_reference  Référence à rappeler lors du paiement
issue_date         Date d'émission (YYYY-MM-DD)
tax_point_date     Date de la livraison ou de la prestation de services (YYYY-MM-DD)
due_date           Date d'échéance / « à payer avant le » (YYYY-MM-DD)
net_by_rate        Montant HT par taux de TVA, p. ex. {"20": 18450.00, "5.5": 1200.00}
vat_by_rate        Montant de la TVA par taux, p. ex. {"20": 3690.00}
total              Montant total TTC / net à payer (nombre, négatif pour un avoir)
currency           Devise selon ISO 4217 (EUR, GBP, …)
bank_account       IBAN de l'émetteur

Règles :
- Ne renvoyez aucune information concernant le client, uniquement celles de l'émetteur.
- Si une information ne figure pas sur le document, renvoyez null. N'inventez rien.
- Si le document ne comporte pas de ventilation de la TVA (micro-entreprise, demande d'acompte), renvoyez net_by_rate et vat_by_rate à null.
- Montants sous forme de nombres avec un point décimal, sans séparateur de milliers et sans devise.

How we score

Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.

What each model extracted

FieldCorrect valueMistral Small 413 / 13 fieldsGPT-6 Luna13 / 13 fieldsGemma 4 31B13 / 13 fieldsGemini 3.5 Flash Lite13 / 13 fieldsQwen3.8 Flash13 / 13 fieldsDeepSeek V4.1 Flash13 / 13 fieldsMistral Medium 3.513 / 13 fieldsGPT-6 Sol13 / 13 fieldsGemini 3.8 Flash13 / 13 fieldsClaude Sonnet 513 / 13 fields
SupplierChristiane Martin EIChristiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)Christiane Martin EI (correct)
Supplier ID (EIN, IČO…)5400109800005554001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)54001098000055 (correct)
VAT ID—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Invoice numberFAC-2025-00624FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)
Payment referenceFAC-2025-00624FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)FAC-2025-00624 (correct)
Invoice date2025-05-182025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)2025-05-18 (correct)
Tax point—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Due date2025-06-012025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)2025-06-01 (correct)
Net by tax rate—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Tax by rate—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Total131.00131.00 (correct)131.00 (correct)131.00 (correct)131.00 (correct)131.00 (correct)131.00 (correct)131 (correct)131.00 (correct)131.00 (correct)131.00 (correct)
CurrencyEUREUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)
Bank accountFR7630003021640000960033137FR7630003021640000960033137 (correct)FR7630003021640000960033137 (correct)FR76 3000 3021 6400 0096 0033 137 (correct)FR76 3000 3021 6400 0096 0033 137 (correct)FR7630003021640000960033137 (correct)FR76 3000 3021 6400 0096 0033 137 (correct)FR7630003021640000960033137 (correct)FR76 3000 3021 6400 0096 0033 137 (correct)FR76 3000 3021 6400 0096 0033 137 (correct)FR7630003021640000960033137 (correct)
Tokensinput / output848 / 180909 / 203892 / 224880 / 2231,246 / 1,8821,153 / 2,191848 / 178909 / 124880 / 1,7611,235 / 577
of which hidden reasoningbilled as output086001,6741,774001,539371
of which from cacheinput billed at a discount3930307686400000
Cost of this documentthis run$0.0002$0.0002$0.0002$0.0008$0.0010$0.0016$0.0026$0.0031$0.0073$0.0082
Per 1,000 documentsfor the same kind of document$0.18$0.19$0.21$0.82$0.97$1.56$2.61$3.06$7.26$8.24
Latencythis run1.5 s2.2 s4.2 s1.2 s27.4 s20.3 s1.6 s2.5 s6.6 s5.6 s