ModelVerdict

Margarita Zaragoza, Jenaro Palau, Trini Menéndez

SpanishDocument6 fields

Document es-p0006 · layout thread · 6 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Document text (the model received exactly this text)

De: Margarita Zaragoza <margarita.zaragoza@talleres-dd.example>
Fecha: 26 de junio de 2025
Asunto: Sede de Valencia – presupuesto y plazos

Hola a todos:

Os envío mi propuesta para la siguiente fase del proyecto Sede de Valencia. El alcance ha crecido respecto al encargo original, por lo que propongo reservar 6.000 € para la reforma de las oficinas de la segunda planta. A modo de comparación, la partida «Compra de equipos» nos costó 12.500 € el año pasado. Para el inicio de la formación mantendría la fecha del 1 de agosto de 2025.

Adjunto las ofertas de los proveedores; completaré el presupuesto detallado cuando reciba vuestros comentarios. Os agradecería una respuesta antes del final de la semana.

Un saludo,
Margarita Zaragoza

----------

De: Víctor Cabeza <victor.cabeza@talleres-dd.example>
Fecha: 27 de junio de 2025
Asunto: RE: Sede de Valencia – presupuesto y plazos

Estimada Sra. Zaragoza:

No puedo aprobar 6.000 €; el presupuesto del proyecto no da para tanto. La fecha del 1 de agosto de 2025 también me parece poco realista, porque el formador no está disponible en la fecha original. Antes de confirmar nada necesito un presupuesto más detallado. Tratémoslo en la próxima reunión del equipo; le ruego que traiga las cifras y una comparación de las ofertas.

Víctor Cabeza

----------

De: Víctor Cabeza <victor.cabeza@talleres-dd.example>
Fecha: 2 de julio de 2025
Asunto: RE: Sede de Valencia – presupuesto y plazos

Hola a todos:

Gracias por la reunión de hoy y por las cifras preparadas. Este es el resumen de lo que hemos acordado definitivamente:
- Reforma de oficinas: 4.500 €
- Compra de equipos: 17.500 €
- Software de contabilidad: 22.000 €
- Nueva fecha para el inicio de la formación: 23 de agosto de 2025

La propuesta de 6.000 € queda por tanto descartada y la fecha original del 1 de agosto de 2025 ya no es válida.

Tareas:
- Margarita Zaragoza: organizar la formación y enviar las invitaciones, plazo: 23 de agosto de 2025
- Jenaro Palau: elaborar el informe intermedio para la dirección, en curso
- Trini Menéndez: pedir los equipos y organizar la instalación, en curso

Si se me ha olvidado algo, por favor avisadme.

Un saludo,
Víctor Cabeza

Verdict

Cheapest with no errors: Gemma 4 31B at $0.17 per 1,000 documents.

  • Gemini 3.8 Flash is also error-free, but 85.2× more expensive.

Prompt given to every model

Resuma el documento siguiente (acta de reunión, informe de estado del proyecto o hilo de correos)
en un máximo de 80 palabras.

Reglas:
- Incluya todas las decisiones definitivas: los importes aprobados, los plazos vigentes y las
  personas responsables de las tareas (con su nombre completo).
- No mencione las propuestas rechazadas ni sus importes, ni los plazos que se han modificado (las
  fechas originales); indique solo los plazos vigentes.
- Copie los importes y las fechas exactamente como aparecen en el documento, sin redondearlos.
- Redacte en el idioma del documento, de forma objetiva y en un registro formal, como texto
  continuo sin títulos.
- Devuelva únicamente JSON con el formato {"summary": "…"}.

How we score

Exact match per field after normalizing dates, amounts, and whitespace. Missing diacritics count as an error. Cost is the actual token spend of this run, converted at the rate shown in the footer.

Free with login

Every model's output for this document, field by field. The first three examples of each task are open.

Just your email, no password.

Log in with email

We use your email only to log you in (and for the digest if you tick it). No spam.