ModelVerdict

Sarah Villanueva · 2025-7876

Anglais (US)Image nette11 champs

Document en-p0025 · mise en page en-L01 · 11 champs · partie publique du jeu de données · Même facture · Tchèque → · Signaler une erreur dans cet exemple

Sarah Villanueva · 2025-7876

Verdict

Le moins cher sans erreur : Mistral Small 4, à 0,45 € pour 1 000 documents.

  • GPT-6 Sol ne fait aucune erreur non plus, mais coûte 28,2× plus cher.
  • Gemma 4 31B est 3,4× moins cher, mais : valeur erronée (Compte bancaire).

Prompt soumis à chaque modèle

Extract the following data from the attached document and return only JSON with these keys:

supplier_name      supplier's name (exactly as printed, including the legal form)
supplier_id        supplier's tax ID (EIN), if printed
invoice_number     document number
payment_reference  payment reference to quote with the payment
issue_date         invoice date (YYYY-MM-DD)
due_date           due date (YYYY-MM-DD)
net_by_rate        amount per sales tax rate, e.g. {"8.25": 1845.00}; non-taxable amounts under "0"
vat_by_rate        sales tax per rate, e.g. {"8.25": 152.21}
total              total due (number, negative for credit notes)
currency           ISO 4217 currency code (USD, GBP, EUR, …)
bank_account       supplier's bank details as "routing-number account-number", or IBAN

Rules:
- Return the supplier's data only, never the customer's.
- If a value is not on the document, return null. Do not guess.
- If the document has no tax breakdown, return net_by_rate and vat_by_rate as null.
- Amounts as numbers with a decimal point, no thousands separators and no currency symbol.

Notre notation

Correspondance exacte par champ, après normalisation des dates, des montants et des espaces. Les diacritiques manquants comptent comme une erreur. Le coût correspond à la consommation réelle de tokens de cette exécution, convertie au taux indiqué en bas de page.

Ce que chaque modèle a extrait

ChampValeur correcteGemma 4 31B10 / 11 champsMistral Small 411 / 11 champsDeepSeek V4.1 Flash11 / 11 champsQwen3.8 Flash11 / 11 champsGPT-6 Luna11 / 11 champsGemini 3.5 Flash Lite11 / 11 champsGemini 3.8 Flash11 / 11 champsMistral Medium 3.511 / 11 champsClaude Sonnet 511 / 11 champsGPT-6 Sol11 / 11 champs
FournisseurSarah VillanuevaSarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)Sarah Villanueva (correct)
Identifiant du fournisseur (EIN, IČO…)—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Numéro de facture2025-78762025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)
Référence de paiement2025-78762025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)2025–7876 (correct)2025-7876 (correct)2025–7876 (correct)2025-7876 (correct)2025-7876 (correct)2025-7876 (correct)
Date de facture2025-09-132025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)2025-09-13 (correct)
Date d'échéance2025-10-132025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)2025-10-13 (correct)
HT par taux—0 %: 19638.03 (correct)0 %: 19638.03 (correct)— (correct)0 %: 19638.03 (correct)— (correct)0 %: 19638.03 (correct)0 %: 19638.03 (correct)0 %: 19638.03 (correct)0 %: 19638.03 (correct)— (correct)
Taxe par taux—— (correct)— (correct)— (correct)0 %: 0.00 (correct)— (correct)0 %: 0.00 (correct)0 %: 0.00 (correct)— (correct)— (correct)— (correct)
Total19638.0319638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)19638.03 (correct)
DeviseUSDUSD (correct)USD (correct)USD (correct)USD (correct)USD (correct)USD (correct)USD (correct)USD (correct)USD (correct)USD (correct)
Compte bancaire043000096 2911246075 043000896 2911246875valeur erronée043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)043000096 2911246075 (correct)
Tokensentrée / sortie584 / 1582 693 / 1501 549 / 4623 108 / 7134 871 / 4051 406 / 1981 406 / 9732 693 / 1495 163 / 1764 871 / 173
dont raisonnement cachéfacturé comme sortie0035255230808320076
dont depuis le cacheentrée facturée à prix réduit3070436384000000
Coût de ce documentcette exécution0,0001 €0,0005 €0,0005 €0,0007 €0,0007 €0,0008 €0,0043 €0,0047 €0,0111 €0,0128 €
Pour 1 000 documentspour ce même type de document0,13 €0,45 €0,51 €0,69 €0,75 €0,84 €4,33 €4,74 €11,12 €12,79 €
Latencecette exécution9,9 s2,1 s4,9 s16,5 s6 s2 s4,3 s3,1 s3,6 s4,4 s