Benoît Maurice, Nicolas Mathieu
Document text (the model received exactly this text)
De : Benoît Maurice <benoit.maurice@reynaud-munoz.example> Date : 26/06/2026 Objet : Site de Lyon – budget et échéances Bonjour à tous, Voici ma proposition pour la prochaine phase du projet Site de Lyon. Le périmètre a augmenté par rapport à la commande initiale ; je propose donc de prévoir 25 000 EUR pour les licences et le déploiement du nouveau logiciel comptable. Pour comparaison, le poste « Conseil externe » nous a coûté 2 000 EUR l'année dernière. Pour la livraison du matériel, je conserverais la date du 17/09/2026. Les offres des prestataires sont jointes ; je compléterai le budget détaillé après vos remarques. Merci de me répondre d'ici la fin de la semaine. Bien cordialement, Benoît Maurice ---------- De : Charles Paris <charles.paris@reynaud-munoz.example> Date : 27/06/2026 Objet : RE : Site de Lyon – budget et échéances Bonjour Monsieur Maurice, Je ne peux pas approuver 25 000 EUR, le budget du projet ne le permet pas. La date du 17/09/2026 me paraît également irréaliste, car le fournisseur signale des retards de livraison. Avant de confirmer quoi que ce soit, j'ai besoin d'un budget plus détaillé. Réglons cela lors de la prochaine réunion d'équipe ; merci d'apporter les chiffres et une comparaison des offres. Charles Paris ---------- De : Charles Paris <charles.paris@reynaud-munoz.example> Date : 02/07/2026 Objet : RE : Site de Lyon – budget et échéances Bonjour à tous, Merci pour la réunion d'aujourd'hui et pour les chiffres préparés. Voici le résumé de ce que nous avons définitivement convenu : - Logiciel comptable : 15 500 EUR - Conseil externe : 3 500 EUR - Nouvelle date pour la livraison du matériel : 16/10/2026 La proposition de 25 000 EUR est donc écartée, et la date initiale du 17/09/2026 n'est plus valable. Actions : - Benoît Maurice : commander le matériel et organiser l'installation, échéance : 16/10/2026 - Nicolas Mathieu : publier l'appel d'offres pour le prestataire, échéance : 20/08/2026 Si j'ai oublié quelque chose, merci de me le signaler. Bien cordialement, Charles Paris
Verdict
Cheapest with no errors: Gemma 4 31B at $0.16 per 1,000 documents.
- Mistral Large 4 is also error-free, but 86.6× more expensive.
Prompt given to every model
Résumez le document ci-dessous (compte rendu de réunion, rapport d'avancement de projet ou fil
d'e-mails) en 80 mots au maximum.
Règles :
- Mentionnez toutes les décisions définitives : les montants approuvés, les échéances en vigueur
et les personnes responsables des actions (avec leur nom complet).
- Ne mentionnez ni les propositions rejetées ni leurs montants, ni les échéances qui ont été
modifiées (les dates initiales) ; indiquez uniquement les échéances en vigueur.
- Reprenez les montants et les dates exactement comme dans le document, sans les arrondir.
- Rédigez dans la langue du document, de manière factuelle et dans un registre formel, sous forme
de texte continu sans titres.
- Renvoyez uniquement du JSON sous la forme {"summary": "…"}.
How we score
Exact match per field after normalizing dates, amounts, and whitespace. Missing diacritics count as an error. Cost is the actual token spend of this run, converted at the rate shown in the footer.
Free with login
Every model's output for this document, field by field. The first three examples of each task are open.
Just your email, no password.