ModelVerdict

Provencedata SAS · SARL Faure Médias

FrenchContract text13 fields

Document fr-p0009 · layout short · 13 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Contract text (the model got exactly this text)

CONTRAT DE LICENCE DE LOGICIEL

ENTRE LES SOUSSIGNÉS :

Provencedata SAS
156 rue des Artisans, 49100 Angers
SIRET : 37705486100010
N° de TVA intracommunautaire : FR65377054861
représentée par M. Jules Rousseau, en sa qualité de Président
ci-après dénommée « le Concédant »,
d'une part,

ET :

SARL Faure Médias
114, avenue Jean Jaurès, 76100 Rouen
SIRET : 79707786400040
N° de TVA intracommunautaire : FR80797077864
représentée par M. Guy Cordier, en sa qualité de gérant
ci-après dénommée « le Licencié »,
d'autre part,

IL A ÉTÉ CONVENU CE QUI SUIT :

1. Objet : Le Concédant concède au Licencié un droit non exclusif et non cessible d'utiliser son logiciel de gestion électronique de documents, en mode SaaS, pour un maximum de 25 utilisateurs nommés.
2. Prix : La redevance de licence s'élève à 30 940,00 € HT par an, à majorer de la TVA au taux en vigueur de 20 % (soit 37 128,00 € TTC). Les factures sont payables à trente (30) jours à compter de leur date d'émission, sans escompte. En cas de retard de paiement, le Licencié sera redevable d'une pénalité de 0,05 % du montant impayé par jour de retard.
3. Durée : Le présent contrat entre en vigueur le 21/05/2025. Il est conclu pour une durée déterminée expirant le 31/12/2028. Aucune résiliation sans motif n'est possible avant le terme du contrat. Chaque partie conserve la faculté de résilier le contrat en cas de manquement grave de l'autre partie.
4. Confidentialité : Les parties s'engagent à garder strictement confidentielles toutes les informations confidentielles de l'autre partie. Tout manquement fautif à cette obligation donnera lieu au paiement, par la partie défaillante, d'une pénalité forfaitaire de 2 500,00 € par manquement.
5. Dispositions diverses : Le présent contrat est soumis au droit français. Tout litige relatif au présent contrat relève de la compétence exclusive des tribunaux de Barre. Toute modification du présent contrat doit faire l'objet d'un avenant écrit signé par les deux parties. Si l'une des stipulations du présent contrat est déclarée nulle, les autres stipulations conservent leur plein effet.


Fait à Barre, le 25/04/2025, en deux exemplaires originaux.

Pour le Concédant : ____________________
Pour le Licencié : ____________________

Verdict

Cheapest without an error: Mistral Small 4 at $0.21 per 1,000 documents.

  • Claude Sonnet 5 is also error-free but 25.9× more expensive.

Prompt given to every model

Extrayez les conditions essentielles du contrat ci-dessous et renvoyez uniquement du JSON avec ces clés :

provider_name         la partie qui fournit la prestation (Prestataire, Vendeur, Bailleur, Concédant),
                      exactement comme indiqué, y compris la forme juridique
provider_id           numéro d'immatriculation de cette partie (p. ex. SIREN, SIRET ou RCS), s'il est indiqué
client_name           la partie qui paie (Client, Acheteur, Preneur, Licencié)
client_id             numéro d'immatriculation de cette partie, s'il est indiqué
contract_type         l'une des valeurs : services, supply, lease, license, maintenance
price                 prix convenu hors TVA (nombre)
currency              code de devise selon ISO 4217 (EUR, CHF, USD, …)
price_period          l'une des valeurs : one_time, monthly, yearly
effective_date        date d'entrée en vigueur du contrat (YYYY-MM-DD)
end_date              fin d'une durée déterminée (YYYY-MM-DD) ; null si le contrat est conclu pour une
                      durée indéterminée
notice_period_months  délai de préavis de résiliation en mois (nombre) ; null s'il n'y en a pas
penalty_pct_per_day   pénalité de retard de paiement en pourcentage du montant impayé par jour
                      (p. ex. 0.05 pour 0,05 %) ; null s'il n'y en a pas
governing_law         code pays du droit applicable selon ISO 3166 (p. ex. FR) ; États américains
                      sous la forme US-XX

Règles :
- Convertissez les dates relatives (« à la date de sa signature », « le premier jour du mois suivant ») par
  rapport à la date de signature.
- La date de signature n'est pas la date d'entrée en vigueur, sauf si le contrat le prévoit expressément.
- L'acompte, le dépôt de garantie et les pénalités forfaitaires pour d'autres manquements ne sont ni le prix ni
  la pénalité de retard de paiement.
- Si une valeur ne figure pas dans le contrat, renvoyez null. Ne devinez pas.
- Montants sous forme de nombres avec un point décimal, sans séparateur de milliers et sans symbole de devise.

How we score

Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.

What each model extracted

FieldCorrect valueMistral Small 413 / 13 fieldsGemma 4 31B12 / 13 fieldsGPT-6 Luna13 / 13 fieldsDeepSeek V4.1 Flash13 / 13 fieldsQwen3.8 Flash13 / 13 fieldsGemini 3.5 Flash Lite13 / 13 fieldsGemini 3.8 Flash13 / 13 fieldsMistral Medium 3.513 / 13 fieldsGPT-6 Sol13 / 13 fieldsClaude Sonnet 513 / 13 fields
ProviderProvencedata SASProvencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)Provencedata SAS (correct)
Provider ID3770548610001037705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)37705486100010 (correct)
ClientSARL Faure MédiasSARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)SARL Faure Médias (correct)
Client ID7970778640004079707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)79707786400040 (correct)
Contract typelicenselicense (correct)license (correct)license (correct)license (correct)license (correct)license (correct)license (correct)license (correct)license (correct)license (correct)
Price (net)30940.0030940.00 (correct)30940.00 (correct)30940.00 (correct)30940 (correct)30940.00 (correct)30940.00 (correct)30940.00 (correct)30940.00 (correct)30940.00 (correct)30940.00 (correct)
CurrencyEUREUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)
Billing periodyearlyyearly (correct)yearly (correct)yearly (correct)yearly (correct)yearly (correct)yearly (correct)yearly (correct)yearly (correct)yearly (correct)yearly (correct)
Effective date2025-05-212025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)2025-05-21 (correct)
End date2028-12-312028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)2028-12-31 (correct)
Notice period (months)—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Late-payment penalty (% per day)0.050.05 (correct) 0.00number format0.05 (correct)0.05 (correct)0.05 (correct)0.05 (correct)0.05 (correct)0.05 (correct)0.05 (correct)0.05 (correct)
Governing lawFRFR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)
Tokensinput / output1,214 / 1641,257 / 1991,306 / 2381,584 / 4391,637 / 1,2251,245 / 1961,245 / 4631,214 / 1641,306 / 1111,785 / 194
of which hidden reasoningbilled as output00863311,0340267000
of which from cacheinput billed at a discount499559079676800000
Cost of this documentthis run$0.0002$0.0003$0.0003$0.0005$0.0007$0.0009$0.0027$0.0031$0.0044$0.0055
Per 1,000 documentsfor the same kind of document$0.21$0.26$0.28$0.47$0.72$0.86$2.67$3.05$4.37$5.51
Latencythis run1.3 s11.2 s2.7 s5.1 s21.9 s1.2 s2.2 s1.2 s2.7 s2.6 s