EURL Rhônasys · Lucas & Fils SAS
Contract text (the model got exactly this text)
BAIL COMMERCIAL Article 1 – Parties ENTRE LES SOUSSIGNÉS : Lucas & Fils SAS Zone artisanale des Grands Prés, 170 ter avenue du Maréchal Leclerc, 63100 Clermont-Ferrand SIRET : 83346765700023 N° de TVA intracommunautaire : FR33833467657 ci-après dénommée « le Preneur », d'une part, ET : EURL Rhônasys 117 place de la Mairie, 75007 Paris SIRET : 56436902300234 N° de TVA intracommunautaire : FR17564369023 représentée par M. Vincent Chevallier, en sa qualité de gérant ci-après dénommée « le Bailleur », d'autre part, Article 2 – Définitions 2.1 « Contrat » désigne le présent contrat, y compris l'ensemble de ses annexes. 2.2 « Informations confidentielles » désigne toutes les informations commerciales et techniques non publiques. 2.3 « Jour ouvré » désigne tout jour du lundi au vendredi, à l'exception des jours fériés légaux. Article 3 – Objet Le Bailleur donne à bail au Preneur des locaux à usage de bureaux d'une surface d'environ 571 m², situés au 3e étage de l'immeuble sis 117 place de la Mairie, 75007 Paris (ci-après « les Locaux »), pour l'exercice de son activité professionnelle. Article 4 – Prix et modalités de paiement 4.1 Le loyer s'élève à 12 570,00 euros HT par an, à majorer de la TVA au taux en vigueur de 20 % (soit 15 084,00 euros TTC). 4.2 Le loyer est payable d'avance, au plus tard le troisième jour ouvré de chaque période. 4.3 Le Preneur verse, dans les dix (10) jours suivant la signature, un dépôt de garantie d'un montant de 3 771,00 €. 4.4 En cas de retard de paiement, le Preneur sera redevable d'une pénalité de 0,05 % du montant impayé par jour de retard. Article 5 – Durée et résiliation 5.1 Le présent contrat entre en vigueur à la date de sa signature par les deux parties. 5.2 Il est conclu pour une durée déterminée expirant le 31 décembre 2027. 5.3 Aucune résiliation sans motif n'est possible avant le terme du contrat. 5.4 Chaque partie conserve la faculté de résilier le contrat en cas de manquement grave de l'autre partie. Article 6 – Confidentialité Les parties s'engagent à garder strictement confidentielles toutes les informations confidentielles de l'autre partie. Article 7 – Dispositions finales 7.1 Le présent contrat est soumis au droit français. 7.2 Tout litige relatif au présent contrat relève de la compétence exclusive des tribunaux de Fontaine-sur-Le Roux. 7.3 Toute modification du présent contrat doit faire l'objet d'un avenant écrit signé par les deux parties. 7.4 Si l'une des stipulations du présent contrat est déclarée nulle, les autres stipulations conservent leur plein effet. Fait à Fontaine-sur-Le Roux, le 12 décembre 2025, en deux exemplaires originaux. Pour le Bailleur : ____________________ Pour le Preneur : ____________________
Verdict
Cheapest without an error: Mistral Small 4 at $0.23 per 1,000 documents.
- Claude Sonnet 5 is also error-free but 31.3× more expensive.
Prompt given to every model
Extrayez les conditions essentielles du contrat ci-dessous et renvoyez uniquement du JSON avec ces clés :
provider_name la partie qui fournit la prestation (Prestataire, Vendeur, Bailleur, Concédant),
exactement comme indiqué, y compris la forme juridique
provider_id numéro d'immatriculation de cette partie (p. ex. SIREN, SIRET ou RCS), s'il est indiqué
client_name la partie qui paie (Client, Acheteur, Preneur, Licencié)
client_id numéro d'immatriculation de cette partie, s'il est indiqué
contract_type l'une des valeurs : services, supply, lease, license, maintenance
price prix convenu hors TVA (nombre)
currency code de devise selon ISO 4217 (EUR, CHF, USD, …)
price_period l'une des valeurs : one_time, monthly, yearly
effective_date date d'entrée en vigueur du contrat (YYYY-MM-DD)
end_date fin d'une durée déterminée (YYYY-MM-DD) ; null si le contrat est conclu pour une
durée indéterminée
notice_period_months délai de préavis de résiliation en mois (nombre) ; null s'il n'y en a pas
penalty_pct_per_day pénalité de retard de paiement en pourcentage du montant impayé par jour
(p. ex. 0.05 pour 0,05 %) ; null s'il n'y en a pas
governing_law code pays du droit applicable selon ISO 3166 (p. ex. FR) ; États américains
sous la forme US-XX
Règles :
- Convertissez les dates relatives (« à la date de sa signature », « le premier jour du mois suivant ») par
rapport à la date de signature.
- La date de signature n'est pas la date d'entrée en vigueur, sauf si le contrat le prévoit expressément.
- L'acompte, le dépôt de garantie et les pénalités forfaitaires pour d'autres manquements ne sont ni le prix ni
la pénalité de retard de paiement.
- Si une valeur ne figure pas dans le contrat, renvoyez null. Ne devinez pas.
- Montants sous forme de nombres avec un point décimal, sans séparateur de milliers et sans symbole de devise.
How we score
Exact match per field after normalising dates, amounts and whitespace. Missing diacritics count as an error. Cost is the real token spend of this run, converted at the rate shown in the footer.
What each model extracted
| Field | Correct value | Mistral Small 413 / 13 fields | Gemma 4 31B12 / 13 fields | GPT-6 Luna13 / 13 fields | DeepSeek V4.1 Flash13 / 13 fields | Qwen3.8 Flash13 / 13 fields | Gemini 3.5 Flash Lite13 / 13 fields | Mistral Medium 3.513 / 13 fields | Gemini 3.8 Flash13 / 13 fields | GPT-6 Sol13 / 13 fields | Claude Sonnet 513 / 13 fields |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Provider | EURL Rhônasys | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) | EURL Rhônasys (correct) |
| Provider ID | 56436902300234 | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) | 56436902300234 (correct) |
| Client | Lucas & Fils SAS | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) | Lucas & Fils SAS (correct) |
| Client ID | 83346765700023 | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) | 83346765700023 (correct) |
| Contract type | lease | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) | lease (correct) |
| Price (net) | 12570.00 | 12570.00 (correct) | 12570.00 (correct) | 12570 (correct) | 12570.00 (correct) | 12570.00 (correct) | 12570.00 (correct) | 12570 (correct) | 12570.00 (correct) | 12570.00 (correct) | 12570.00 (correct) |
| Currency | EUR | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) | EUR (correct) |
| Billing period | yearly | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) | yearly (correct) |
| Effective date | 2025-12-12 | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) | 2025-12-12 (correct) |
| End date | 2027-12-31 | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) | 2027-12-31 (correct) |
| Notice period (months) | — | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) | — (correct) |
| Late-payment penalty (% per day) | 0.05 | 0.05 (correct) | 0.00number format | 0.05 (correct) | 0.05 (correct) | 0.05 (correct) | 0.05 (correct) | 0.05 (correct) | 0.05 (correct) | 0.05 (correct) | 0.05 (correct) |
| Governing law | FR | FR (correct) | FR (correct) | FR (correct) | FR (correct) | FR (correct) | FR (correct) | FR (correct) | FR (correct) | FR (correct) | FR (correct) |
| Tokens | input / output | 1,338 / 163 | 1,391 / 198 | 1,434 / 209 | 1,719 / 615 | 1,790 / 1,077 | 1,379 / 196 | 1,338 / 161 | 1,379 / 803 | 1,434 / 112 | 2,040 / 308 |
| of which hidden reasoning | billed as output | 0 | 0 | 97 | 504 | 885 | 0 | 0 | 661 | 0 | 110 |
| of which from cache | input billed at a discount | 515 | 567 | 0 | 804 | 768 | 0 | 0 | 0 | 0 | 0 |
| Cost of this document | this run | $0.0002 | $0.0003 | $0.0003 | $0.0006 | $0.0007 | $0.0009 | $0.0032 | $0.0040 | $0.0047 | $0.0072 |
| Per 1,000 documents | for the same kind of document | $0.23 | $0.27 | $0.28 | $0.61 | $0.67 | $0.90 | $3.21 | $4.05 | $4.70 | $7.16 |
| Latency | this run | 1.3 s | 10 s | 2.7 s | 7.1 s | 17.1 s | 1.1 s | 1.2 s | 3.1 s | 2.5 s | 4.5 s |