SLA: Welche Gutschrift auf die monatliche Pauschale …
Dokument und Fragen (das Modell hat genau diesen Text erhalten)
Bonbach AG ANLAGE 2 ZUM IT-DIENSTLEISTUNGSVERTRAG – SERVICE LEVEL AGREEMENT 1. Gegenstand und Laufzeit 1.1 Dieses Service Level Agreement (nachfolgend „SLA“) legt die Betriebs- und Supportparameter der Cloud-Anwendung fest, die die Bonbach AG (nachfolgend „Anbieter“) für den Auftraggeber betreibt. 1.2 Die monatliche Pauschale für die Leistungen nach diesem SLA beträgt 2.200 € zuzüglich Umsatzsteuer. 1.3 Dieses SLA gilt ab dem 19. Februar 2026 und ersetzt die Fassung vom 7. Juni 2025. 2. Verfügbarkeit 2.1 Der Anbieter garantiert eine monatliche Verfügbarkeit der Produktionsumgebung von 99,7 %. Die Zielverfügbarkeit der Testumgebung beträgt 97 % und begründet keinen Anspruch auf Gutschriften. 2.2 Die Verfügbarkeit misst der Anbieter mit seinem Monitoringsystem im Abstand von 5 Minuten. Einen monatlichen Verfügbarkeitsbericht übermittelt er dem Auftraggeber bis zum 5. Arbeitstag des Folgemonats. 2.3 Geplante Wartungsarbeiten gelten nicht als Ausfallzeit. Der Anbieter kündigt geplante Wartungen mindestens 10 Tage im Voraus an; sie umfassen höchstens 4 Stunden pro Kalendermonat. 2.4 Wartungsarbeiten finden in der Regel am Wochenende in den Nachtstunden statt. 3. Support und Reaktionszeiten 3.1 Der Auftraggeber meldet Störungen über das Serviceportal oder per E-Mail an service@bonbach.example. Störungen der Priorität P1 nimmt der Anbieter rund um die Uhr an 7 Tagen pro Woche entgegen. 3.2 Bei Störungen der Priorität P1 (kritischer Ausfall, der Dienst ist vollständig ausgefallen) reagiert der Anbieter innerhalb von 4 Stunden nach der Meldung und stellt den Dienst innerhalb von 6 Stunden wieder her oder stellt eine Umgehungslösung bereit. 3.3 Bei Störungen der Priorität P2 (eingeschränkte Funktion ohne Umgehungslösung) reagiert der Anbieter innerhalb von 8 Stunden nach der Meldung während der Geschäftszeiten. 3.4 Anfragen der Priorität P3 und niedriger bearbeitet der Anbieter spätestens am folgenden Arbeitstag. 4. Gutschriften 4.1 Unterschreitet die monatliche Verfügbarkeit der Produktionsumgebung das garantierte Niveau, erhält der Auftraggeber eine Gutschrift in Höhe von 15 % der monatlichen Pauschale für den betroffenen Monat. 4.2 Gutschriften für einen Kalendermonat betragen insgesamt höchstens 50 % der monatlichen Pauschale. Der Auftraggeber macht Gutschriften schriftlich innerhalb von 30 Tagen nach Monatsende geltend. 4.3 Fragen zur Abrechnung beantwortet der Vertrieb des Anbieters unter rechnungen@bonbach.example. --- Fragen: 1. Welche Gutschrift auf die monatliche Pauschale erhält der Auftraggeber, wenn die garantierte Verfügbarkeit nicht erreicht wird? (Prozent) 2. Wie viele Tage im Voraus muss der Anbieter geplante Wartungen ankündigen? (Anzahl Tage) 3. An welche E-Mail-Adresse meldet der Auftraggeber Störungen? (E-Mail-Adresse) 4. Wie lang ist die Reaktionszeit bei Störungen der Priorität P1? (Anzahl Stunden) 5. Wie lange bewahrt der Anbieter Datensicherungen auf? (Anzahl Tage) 6. Wie lang ist die Reaktionszeit bei Störungen der Priorität P2? (Anzahl Stunden)
Fazit
Am günstigsten ohne Fehler: Gemma 4 31B für 0,16 € pro 1.000 Dokumente.
- Mistral Large 4 ist ebenfalls fehlerfrei, aber 88× teurer.
Prompt für alle Modelle
Sie beantworten Fragen zu einem Geschäftsdokument. Unter dem Dokument stehen sechs nummerierte Fragen. Beantworten Sie jede Frage ausschließlich anhand des Dokumenttextes und geben Sie nur JSON mit den Schlüsseln q1 bis q6 zurück (q1 = Antwort auf Frage 1 usw.). Regeln: - Jede Frage nennt in Klammern die Einheit oder das Format der Antwort. Antworten Sie in dieser Einheit. - Anzahlen (Tage, Monate, Stunden) und Prozentsätze als Zahl ohne Einheit und ohne %-Zeichen, z. B. "14" oder "0.05". - Beträge als Zahl mit Dezimalpunkt, ohne Tausendertrennzeichen und ohne Währungssymbol, z. B. "1500.00". - Datumsangaben im Format YYYY-MM-DD. - Zeiträume im 24-Stunden-Format HH:MM-HH:MM, z. B. "08:00-17:00". - E-Mail-Adressen genau so, wie sie im Dokument stehen. - Enthält das Dokument die Antwort auf eine Frage nicht, geben Sie null zurück. Raten Sie nicht und ergänzen Sie keine Angaben, die nicht im Dokument stehen.
So bewerten wir
Exakte Übereinstimmung pro Feld nach Normalisierung von Datumsangaben, Beträgen und Leerzeichen. Fehlende diakritische Zeichen zählen als Fehler. Die Kosten sind der reale Tokenverbrauch dieses Laufs, umgerechnet zum Kurs in der Fußzeile.
Was jedes Modell extrahiert hat
| Feld | Richtiger Wert | Gemma 4 31B6 / 6 Felder | GPT-6 Luna6 / 6 Felder | Mistral Small 46 / 6 Felder | GLM-5.3 Flash6 / 6 Felder | DeepSeek V4.1 Flash6 / 6 Felder | Qwen3.8 Flash6 / 6 Felder | Claude Haiku 5.56 / 6 Felder | Gemini 3.5 Flash Lite6 / 6 Felder | Mistral Medium 3.56 / 6 Felder | GPT-6 Sol6 / 6 Felder | Gemini 3.8 Flash6 / 6 Felder | Claude Sonnet 56 / 6 Felder | Claude Sonnet 5.56 / 6 Felder | Mistral Large 46 / 6 Felder |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Frage 1 | 15 | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) | 15 (richtig) |
| Frage 2 | 10 | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) | 10 (richtig) |
| Frage 3 | service@bonbach.example | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) | service@bonbach.example (richtig) |
| Frage 4 | 4 | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) | 4 (richtig) |
| Frage 5 | — | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) | — (richtig) |
| Frage 6 | 8 | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) | 8 (richtig) |
| Tokens | Eingabe / Ausgabe | 1.106 / 49 | 1.081 / 92 | 1.100 / 48 | 1.116 / 181 | 1.343 / 95 | 1.283 / 302 | 2.445 / 128 | 1.094 / 63 | 1.100 / 48 | 1.081 / 42 | 1.094 / 696 | 2.443 / 48 | 2.445 / 48 | 1.098 / 2.775 |
| davon verborgenes Reasoning | als Ausgabe berechnet | 0 | 48 | 0 | 132 | 48 | 237 | 76 | 0 | 0 | 0 | 633 | 0 | 0 | 2.412 |
| davon aus dem Cache | Eingabe mit Rabatt | 3 | 0 | 0 | 0 | 320 | 256 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 492 |
| Kosten für dieses Dokument | dieser Lauf | 0,0002 € | 0,0002 € | 0,0002 € | 0,0002 € | 0,0003 € | 0,0003 € | 0,0003 € | 0,0004 € | 0,0018 € | 0,0029 € | 0,0032 € | 0,0049 € | 0,0049 € | 0,0141 € |
| Pro 1.000 Dokumente | für Dokumente dieser Art | 0,16 € | 0,17 € | 0,18 € | 0,24 € | 0,27 € | 0,28 € | 0,28 € | 0,45 € | 1,85 € | 2,87 € | 3,16 € | 4,94 € | 4,94 € | 14,12 € |
| Latenz | dieser Lauf | 1,4 s | 4,4 s | 0,6 s | 1,8 s | 3 s | 5,6 s | 1,7 s | 0,9 s | 0,8 s | 2,4 s | 3,1 s | 3 s | 3,1 s | 36,1 s |