ModelVerdict

Paca Ibañez, Tecla Armengol, Verónica Arjona

SpanishDocument6 fields

Document es-p0031 · layout minutes · 6 fields · public part of the dataset · Same invoice in English (US) → · Report an error in this example

Document text (the model received exactly this text)

Acta de la reunión del proyecto – Sede de Valencia

Fecha: 11/02/2025, de 9:00 a 10:30 h
Lugar: sala de reuniones B401
Asistentes: Epifanio Canales, Paca Ibañez, Tecla Armengol, Verónica Arjona
Redacta el acta: Verónica Arjona
Número de páginas: 3

Orden del día:
Punto 1: Formación del personal
Punto 2: Consultoría externa
Punto 3: Calendario
Punto 4: Tareas y otros asuntos

El Sr. Canales abrió la reunión, dio la bienvenida a los asistentes y resumió brevemente el estado del proyecto. La mayoría de los trabajos avanza según el plan; el tema principal de la reunión fue el presupuesto.

Punto 1: Formación del personal
La Sra. Armengol propuso reservar 35.000 € para cursos de idiomas y formación técnica del personal, ya que el alcance ha crecido respecto al encargo original. El Sr. Canales recordó que el presupuesto del proyecto no admite un importe tan alto. La propuesta de 35.000 € fue rechazada en la votación (2 votos a favor, 5 en contra). A continuación, el equipo aprobó 23.000 € para cursos de idiomas y formación técnica del personal.

Punto 2: Consultoría externa
La Sra. Ibañez presentó las ofertas de tres proveedores y recomendó la más ventajosa. A modo de comparación, la misma partida costó 54.000 € el año pasado. El equipo aprobó 80.000 € para los consultores externos del análisis de procesos.

Punto 3: Calendario
La fecha original prevista para la firma del contrato con el proveedor, el 10/03/2025, no se puede cumplir, porque el proveedor todavía no ha enviado el borrador revisado del contrato. El equipo acordó la nueva fecha del 06/04/2025; la fecha original del 10/03/2025 queda por tanto anulada. Todos los demás plazos se mantienen. El Sr. Canales agradeció a la Sra. Arjona el aviso de que hay que informar a los departamentos afectados.

Punto 4: Tareas y otros asuntos
Tareas:
- Paca Ibañez: preparar y firmar el contrato con el proveedor, plazo: 06/04/2025
- Tecla Armengol: publicar la licitación del proveedor de servicios, en curso
- Verónica Arjona: lanzar la campaña y preparar los contenidos de la web, en curso

Próxima reunión: 18/02/2025, en la misma sala. Las observaciones al acta se enviarán en un plazo de dos días hábiles.

Verdict

Cheapest with no errors: Gemma 4 31B at $0.16 per 1,000 documents.

  • Mistral Large 4 is also error-free, but 45.4× more expensive.

Prompt given to every model

Resuma el documento siguiente (acta de reunión, informe de estado del proyecto o hilo de correos)
en un máximo de 80 palabras.

Reglas:
- Incluya todas las decisiones definitivas: los importes aprobados, los plazos vigentes y las
  personas responsables de las tareas (con su nombre completo).
- No mencione las propuestas rechazadas ni sus importes, ni los plazos que se han modificado (las
  fechas originales); indique solo los plazos vigentes.
- Copie los importes y las fechas exactamente como aparecen en el documento, sin redondearlos.
- Redacte en el idioma del documento, de forma objetiva y en un registro formal, como texto
  continuo sin títulos.
- Devuelva únicamente JSON con el formato {"summary": "…"}.

How we score

Exact match per field after normalizing dates, amounts, and whitespace. Missing diacritics count as an error. Cost is the actual token spend of this run, converted at the rate shown in the footer.

Free with login

Every model's output for this document, field by field. The first three examples of each task are open.

Just your email, no password.

Log in with email

We use your email only to log you in (and for the digest if you tick it). No spam.