ModelVerdict

Julien Delmas, Juliette Teixeira

FrenchDocument6 fields

Document fr-p0020 · layout status · 6 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Document text (the model received exactly this text)

Rapport d'avancement du projet – Migration ERP
Période couverte : du 29 décembre 2025 au 12 janvier 2026
Rédigé par : Marcel Charrier, chef de projet
Page 1 sur 3

1. État général
Nous évaluons le projet globalement en orange. Les travaux principaux respectent le calendrier, mais le comité de pilotage a dû se prononcer sur le report d'une échéance.

Réalisé au cours de la période :
- analyse des besoins terminée et validée avec les utilisateurs clés,
- environnement de test mis en place et premiers tests de recette effectués,
- registre des risques et plan de communication mis à jour,
- toutes les demandes ouvertes de la période précédente traitées, sauf une.

2. Budget et modifications
Le comité de pilotage a approuvé les montants suivants :
- Logiciel comptable : 7 000 EUR
- Formation du personnel : 3 000 EUR
- Campagne marketing : 4 000 EUR

Demande de modification DM-18 : Juliette Teixeira a demandé de porter le montant prévu pour les licences et le déploiement du nouveau logiciel comptable à 9 000 EUR. Le comité de pilotage a rejeté cette demande ; le montant approuvé reste de 7 000 EUR.
Pour comparaison, le poste « Formation du personnel » avait coûté 2 000 EUR l'année dernière.

3. Calendrier
La date initiale prévue pour le rapport intermédiaire, le 15 avril 2026, est reportée au 1er mai 2026, car il manque encore des chiffres de la comptabilité. Le comité de pilotage a approuvé ce report ; la date initiale n'est plus valable.

4. Prochaines étapes
- Rédiger le rapport intermédiaire pour la direction – responsable : Julien Delmas, échéance : 1er mai 2026
- Commander le matériel et organiser l'installation – responsable : Juliette Teixeira, échéance : 22 mars 2026

5. Risques
Le principal risque reste la disponibilité des fournisseurs pendant l'été. L'équipe suit ce risque et proposera des mesures si nécessaire.

6. Communication
Les utilisateurs clés ont été informés des changements lors de leur réunion régulière. Les informations à jour sur le projet sont disponibles sur l'intranet ; merci d'adresser vos questions à l'équipe projet.

Le prochain rapport d'avancement suivra la réunion du comité de pilotage du 26 janvier 2026.

Verdict

Cheapest with no errors: Gemma 4 31B at $0.15 per 1,000 documents.

  • Mistral Large 4 is also error-free, but 97.3× more expensive.

Prompt given to every model

Résumez le document ci-dessous (compte rendu de réunion, rapport d'avancement de projet ou fil
d'e-mails) en 80 mots au maximum.

Règles :
- Mentionnez toutes les décisions définitives : les montants approuvés, les échéances en vigueur
  et les personnes responsables des actions (avec leur nom complet).
- Ne mentionnez ni les propositions rejetées ni leurs montants, ni les échéances qui ont été
  modifiées (les dates initiales) ; indiquez uniquement les échéances en vigueur.
- Reprenez les montants et les dates exactement comme dans le document, sans les arrondir.
- Rédigez dans la langue du document, de manière factuelle et dans un registre formel, sous forme
  de texte continu sans titres.
- Renvoyez uniquement du JSON sous la forme {"summary": "…"}.

How we score

Exact match per field after normalizing dates, amounts, and whitespace. Missing diacritics count as an error. Cost is the actual token spend of this run, converted at the rate shown in the footer.

Free with login

Every model's output for this document, field by field. The first three examples of each task are open.

Just your email, no password.

Log in with email

We use your email only to log you in (and for the digest if you tick it). No spam.