ModelVerdict

Établissements Martin SAS · Lambert et Associés SAS

FrenchContract text13 fields

Document fr-p0026 · layout definitions · 13 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Contract text (the model got exactly this text)

CONTRAT DE PRESTATION DE SERVICES

Article 1 – Parties

ENTRE LES SOUSSIGNÉS :

Lambert et Associés SAS
47 rue du Stade, 45100 Orléans
SIRET : 96335036800055
N° de TVA intracommunautaire : FR39963350368
représentée par M. Arthur Gautier, en sa qualité de Président
ci-après dénommée « le Client »,
d'une part,

ET :

Établissements Martin SAS
29, rue du Stade, 92100 Boulogne-Billancourt
SIRET : 76505443200057
N° de TVA intracommunautaire : FR39765054432
représentée par M. Jérôme Caron, en sa qualité de Président
ci-après dénommée « le Prestataire »,
d'autre part,

Article 2 – Définitions

2.1 « Contrat » désigne le présent contrat, y compris l'ensemble de ses annexes.
2.2 « Informations confidentielles » désigne toutes les informations commerciales et techniques non publiques.
2.3 « Jour ouvré » désigne tout jour du lundi au vendredi, à l'exception des jours fériés légaux.

Article 3 – Objet

Le Prestataire s'engage à fournir au Client des prestations d'infogérance de l'infrastructure informatique et d'assistance aux utilisateurs, conformément au descriptif figurant en Annexe 1.

Article 4 – Prix et modalités de paiement

4.1 La rémunération du Prestataire s'élève à 6 040,00 € HT, TVA au taux de 20 % en sus.
4.2 Les factures sont payables à trente (30) jours à compter de leur date d'émission, sans escompte.
4.3 En cas de retard de paiement, le Client sera redevable d'une pénalité de 0,02 % du montant impayé par jour de retard.

Article 5 – Durée et résiliation

5.1 Le présent contrat entre en vigueur à la date de sa signature par les deux parties.
5.2 Il est conclu pour une durée indéterminée.
5.3 Le délai de préavis de résiliation est de trois (3) mois et expire à la fin d'un mois civil ; la résiliation doit être notifiée par écrit.
5.4 Chaque partie conserve la faculté de résilier le contrat en cas de manquement grave de l'autre partie.

Article 6 – Confidentialité

Les parties s'engagent à garder strictement confidentielles toutes les informations confidentielles de l'autre partie.

Article 7 – Dispositions finales

7.1 Le présent contrat est soumis au droit français.
7.2 Tout litige relatif au présent contrat relève de la compétence exclusive des tribunaux de Jean.
7.3 Toute modification du présent contrat doit faire l'objet d'un avenant écrit signé par les deux parties.
7.4 Si l'une des stipulations du présent contrat est déclarée nulle, les autres stipulations conservent leur plein effet.


Fait à Jean, le 14/05/2025, en deux exemplaires originaux.

Pour le Prestataire : ____________________
Pour le Client : ____________________

Verdict

Cheapest without an error: Mistral Medium 3.5 at $3.05 per 1,000 documents.

  • Gemini 3.8 Flash is also error-free but 1.6× more expensive.
  • Mistral Small 4 is 14.4× cheaper, but: wrong value (Billing period).
  • Gemma 4 31B is 11.7× cheaper, but: number format (Late-payment penalty (% per day)).
  • GPT-6 Luna is 10.8× cheaper, but: missing field (Billing period).

Prompt given to every model

Extrayez les conditions essentielles du contrat ci-dessous et renvoyez uniquement du JSON avec ces clés :

provider_name         la partie qui fournit la prestation (Prestataire, Vendeur, Bailleur, Concédant),
                      exactement comme indiqué, y compris la forme juridique
provider_id           numéro d'immatriculation de cette partie (p. ex. SIREN, SIRET ou RCS), s'il est indiqué
client_name           la partie qui paie (Client, Acheteur, Preneur, Licencié)
client_id             numéro d'immatriculation de cette partie, s'il est indiqué
contract_type         l'une des valeurs : services, supply, lease, license, maintenance
price                 prix convenu hors TVA (nombre)
currency              code de devise selon ISO 4217 (EUR, CHF, USD, …)
price_period          l'une des valeurs : one_time, monthly, yearly
effective_date        date d'entrée en vigueur du contrat (YYYY-MM-DD)
end_date              fin d'une durée déterminée (YYYY-MM-DD) ; null si le contrat est conclu pour une
                      durée indéterminée
notice_period_months  délai de préavis de résiliation en mois (nombre) ; null s'il n'y en a pas
penalty_pct_per_day   pénalité de retard de paiement en pourcentage du montant impayé par jour
                      (p. ex. 0.05 pour 0,05 %) ; null s'il n'y en a pas
governing_law         code pays du droit applicable selon ISO 3166 (p. ex. FR) ; États américains
                      sous la forme US-XX

Règles :
- Convertissez les dates relatives (« à la date de sa signature », « le premier jour du mois suivant ») par
  rapport à la date de signature.
- La date de signature n'est pas la date d'entrée en vigueur, sauf si le contrat le prévoit expressément.
- L'acompte, le dépôt de garantie et les pénalités forfaitaires pour d'autres manquements ne sont ni le prix ni
  la pénalité de retard de paiement.
- Si une valeur ne figure pas dans le contrat, renvoyez null. Ne devinez pas.
- Montants sous forme de nombres avec un point décimal, sans séparateur de milliers et sans symbole de devise.

How we score

Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.

What each model extracted

FieldCorrect valueMistral Small 412 / 13 fieldsGemma 4 31B12 / 13 fieldsGPT-6 Luna12 / 13 fieldsGemini 3.5 Flash Lite12 / 13 fieldsQwen3.8 Flash12 / 13 fieldsDeepSeek V4.1 Flash12 / 13 fieldsMistral Medium 3.513 / 13 fieldsGPT-6 Sol12 / 13 fieldsGemini 3.8 Flash13 / 13 fieldsClaude Sonnet 512 / 13 fields
ProviderÉtablissements Martin SASÉtablissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)Établissements Martin SAS (correct)
Provider ID7650544320005776505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)76505443200057 (correct)
ClientLambert et Associés SASLambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)Lambert et Associés SAS (correct)
Client ID9633503680005596335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)96335036800055 (correct)
Contract typeservicesservices (correct)services (correct)services (correct)services (correct)services (correct)services (correct)services (correct)services (correct)services (correct)services (correct)
Price (net)6040.006040.00 (correct)6040.00 (correct)6040.00 (correct)6040.00 (correct)6040.00 (correct)6040.00 (correct)6040.00 (correct)6040.00 (correct)6040 (correct)6040.00 (correct)
CurrencyEUREUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)EUR (correct)
Billing periodone_time monthlywrong valueone_time (correct) nullmissing field monthlywrong value nullmissing field nullmissing fieldone_time (correct) nullmissing fieldone_time (correct) nullmissing field
Effective date2025-05-142025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)2025-05-14 (correct)
End date—— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)— (correct)
Notice period (months)33 (correct)3 (correct)3 (correct)3 (correct)3 (correct)3 (correct)3 (correct)3 (correct)3 (correct)3 (correct)
Late-payment penalty (% per day)0.020.02 (correct) 0.00number format0.02 (correct)0.02 (correct)0.02 (correct)0.02 (correct)0.02 (correct)0.02 (correct)0.02 (correct)0.02 (correct)
Governing lawFRFR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)FR (correct)
Tokensinput / output1,256 / 1551,311 / 1921,375 / 2221,299 / 1881,704 / 1,7731,665 / 1,2191,256 / 1551,375 / 1301,299 / 1,0141,924 / 703
of which hidden reasoningbilled as output0011401,5931,112022827513
of which from cacheinput billed at a discount51555800768808419000
Cost of this documentthis run$0.0002$0.0003$0.0003$0.0009$0.0010$0.0010$0.0030$0.0047$0.0048$0.0109
Per 1,000 documentsfor the same kind of document$0.21$0.26$0.28$0.86$0.99$1.00$3.05$4.74$4.78$10.88
Latencythis run1.1 s2.8 s2.9 s1 s31.2 s15.1 s1.3 s2.9 s4.5 s7.8 s