Vilma Lluch, Ale Estevez
Texto del documento (el modelo recibió exactamente este texto)
Acta de la reunión del proyecto – Sede de Valencia Fecha: 12/03/2025, de 9:00 a 10:30 h Lugar: sala de reuniones A203 Asistentes: Jose Miguel Salas, Vilma Lluch, Ale Estevez Redacta el acta: Vilma Lluch Número de páginas: 4 Orden del día: Punto 1: Campaña de marketing Punto 2: Reforma de oficinas Punto 3: Calendario Punto 4: Tareas y otros asuntos El Sr. Salas abrió la reunión, dio la bienvenida a los asistentes y resumió brevemente el estado del proyecto. El proyecto avanza según lo previsto; solo hay pequeños retrasos en algunas entregas. Punto 1: Campaña de marketing La Sra. Lluch propuso reservar 66.000 € para la campaña de marketing de otoño, ya que el alcance ha crecido respecto al encargo original. El Sr. Salas recordó que el presupuesto del proyecto no admite un importe tan alto. La propuesta de 66.000 € fue rechazada en la votación (2 votos a favor, 5 en contra). A continuación, el equipo aprobó 50.000 € para la campaña de marketing de otoño. Punto 2: Reforma de oficinas El Sr. Salas presentó las ofertas de tres proveedores y recomendó la más ventajosa. A modo de comparación, la misma partida costó 23.000 € el año pasado. El equipo aprobó 33.000 € para la reforma de las oficinas de la segunda planta. Punto 3: Calendario La fecha original prevista para el informe intermedio, el 16/05/2025, no se puede cumplir, porque todavía faltan cifras de contabilidad. El equipo acordó la nueva fecha del 07/06/2025; la fecha original del 16/05/2025 queda por tanto anulada. Todos los demás plazos se mantienen. El Sr. Salas agradeció a la Sra. Lluch el aviso de que hay que informar a los departamentos afectados. Punto 4: Tareas y otros asuntos Tareas: - Vilma Lluch: elaborar el informe intermedio para la dirección, plazo: 07/06/2025 - Ale Estevez: preparar y firmar el contrato con el proveedor, plazo: 03/04/2025 Próxima reunión: 19/03/2025, en la misma sala. Las observaciones al acta se enviarán en un plazo de dos días hábiles.
Veredicto
El más barato sin errores: Gemma 4 31B, a 0,15 € por cada 1000 documentos.
- Gemini 3.8 Flash tampoco comete errores, pero es 48× más caro.
Prompt enviado a todos los modelos
Resuma el documento siguiente (acta de reunión, informe de estado del proyecto o hilo de correos)
en un máximo de 80 palabras.
Reglas:
- Incluya todas las decisiones definitivas: los importes aprobados, los plazos vigentes y las
personas responsables de las tareas (con su nombre completo).
- No mencione las propuestas rechazadas ni sus importes, ni los plazos que se han modificado (las
fechas originales); indique solo los plazos vigentes.
- Copie los importes y las fechas exactamente como aparecen en el documento, sin redondearlos.
- Redacte en el idioma del documento, de forma objetiva y en un registro formal, como texto
continuo sin títulos.
- Devuelva únicamente JSON con el formato {"summary": "…"}.
Cómo puntuamos
Coincidencia exacta por campo tras normalizar fechas, importes y espacios. La falta de diacríticos cuenta como error. El coste es el gasto real en tokens de esta ejecución, convertido al tipo de cambio indicado en el pie de página.
Lo que extrajo cada modelo
| Campo | Valor correcto | Gemma 4 31B6 / 6 campos | GPT-6 Luna6 / 6 campos | Mistral Small 46 / 6 campos | Claude Haiku 5.56 / 6 campos | Gemini 3.5 Flash Lite6 / 6 campos | Qwen3.8 Flash6 / 6 campos | DeepSeek V4.1 Flash6 / 6 campos | GLM-5.3 Flash6 / 6 campos | Mistral Medium 3.56 / 6 campos | GPT-6 Sol6 / 6 campos | Claude Sonnet 56 / 6 campos | Claude Sonnet 5.56 / 6 campos | Mistral Large 46 / 6 campos | Gemini 3.8 Flash6 / 6 campos |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Importes | 50000.0; 33000.0 | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) | 50000; 33000 (correcto) |
| Plazos | 2025-06-07; 2025-04-03 | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) | 2025-06-07; 2025-04-03 (correcto) |
| Responsables | Vilma Lluch; Ale Estevez | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) | Vilma Lluch; Ale Estevez (correcto) |
| Propuestas rechazadas (no deben aparecer)Importes de propuestas que el documento rechaza. No deben aparecer en el resumen: confundirían al lector. | 66000.0 | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) |
| Plazos sustituidos (no deben aparecer)Fechas que el documento cambia más adelante. El resumen solo debe dar la nueva fecha. | 2025-05-16 | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) | — (correcto) |
| Longitud (máx. palabras)El resumen no puede superar el límite de palabras del prompt. | 80 | 60 / 80 (correcto) | 54 / 80 (correcto) | 65 / 80 (correcto) | 80 / 80 (correcto) | 74 / 80 (correcto) | 66 / 80 (correcto) | 73 / 80 (correcto) | 72 / 80 (correcto) | 40 / 80 (correcto) | 70 / 80 (correcto) | 66 / 80 (correcto) | 72 / 80 (correcto) | 65 / 80 (correcto) | 63 / 80 (correcto) |
| Tokens | entrada / salida | 790 / 120 | 747 / 224 | 792 / 130 | 1365 / 647 | 778 / 131 | 896 / 1091 | 889 / 1248 | 795 / 2416 | 792 / 92 | 747 / 228 | 1363 / 187 | 1365 / 191 | 730 / 2888 | 778 / 1876 |
| de ellos, razonamiento oculto | se factura como salida | 0 | 118 | 0 | 432 | 0 | 950 | 1107 | 1862 | 0 | 98 | 0 | 0 | 2435 | 1762 |
| de ellos, desde caché | entrada con descuento | 3 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 |
| Coste de este documento | esta ejecución | 0,0001 € | 0,0002 € | 0,0002 € | 0,0004 € | 0,0005 € | 0,0006 € | 0,0009 € | 0,0012 € | 0,0017 € | 0,0035 € | 0,0042 € | 0,0043 € | 0,0060 € | 0,0070 € |
| Por cada 1000 documentos | para el mismo tipo de documento | 0,15 € | 0,17 € | 0,18 € | 0,42 € | 0,52 € | 0,60 € | 0,94 € | 1,22 € | 1,73 € | 3,47 € | 4,23 € | 4,27 € | 6,01 € | 7,01 € |
| Latencia | esta ejecución | 2,4 s | 2,6 s | 1,6 s | 3,3 s | 0,9 s | 15 s | 13,6 s | 17 s | 0,9 s | 4,6 s | 3 s | 2,1 s | 39,4 s | 7,1 s |