ModelVerdict

Vergleich

Gemini 3.8 Flash vs. Gemma 4 31B

Dieselben Dokumente, derselbe Prompt: wo welches Modell richtig liegt, was es wirklich kostet und wie schnell es antwortet.

Auf einen Blick

Richtige Felder: Gemini 3.8 Flash / Gemma 4 31B; das bessere fett. Klicken Sie auf eine Zelle für Details.

Rechnungsextraktion · Deutsch (150 Dokumente)

Gemini 3.8 Flash ist um 2,4 Pp. genauer. Gemma 4 31B ist 35,9× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder97,2 %94,9 %
Fehlerfreie Dokumente96 %64 %
Pro 1.000 Dokumente6,58 €0,18 €
Zu korrigieren / 1.00040360
Tempo (Median)4,7 Sek.7,7 Sek.
Gültige Antworten97,3 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Lieferant97,3 %98,7 %
Lieferanten-ID (EIN, IČO…)97,3 %99,3 %
USt-IdNr.96,7 %94,0 %
Rechnungsnummer97,3 %99,3 %
Zahlungsreferenz97,3 %98,7 %
Rechnungsdatum97,3 %87,3 %
Leistungsdatum97,3 %92,0 %
Fälligkeitsdatum97,3 %90,7 %
Netto nach Steuersatz96,7 %94,7 %
Steuer nach Steuersatz97,3 %97,3 %
Gesamtbetrag97,3 %99,3 %
Währung97,3 %99,3 %
Bankverbindung97,3 %82,7 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Englisch (USA) (150 Dokumente)

Gemini 3.8 Flash ist um 2,2 Pp. genauer. Gemma 4 31B ist 22,9× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,8 %97,6 %
Fehlerfreie Dokumente98 %81 %
Pro 1.000 Dokumente3,53 €0,15 €
Zu korrigieren / 1.00020187
Tempo (Median)3,2 Sek.8,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Lieferant100,0 %99,3 %
Lieferanten-ID (EIN, IČO…)100,0 %98,0 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %99,3 %
Rechnungsdatum100,0 %98,7 %
Fälligkeitsdatum100,0 %98,7 %
Netto nach Steuersatz100,0 %95,3 %
Steuer nach Steuersatz100,0 %98,7 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %100,0 %
Bankverbindung98,0 %86,0 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Tschechisch (150 Dokumente)

Gemini 3.8 Flash ist um 3,9 Pp. genauer. Gemma 4 31B ist 20,1× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder100,0 %96,1 %
Fehlerfreie Dokumente99 %67 %
Pro 1.000 Dokumente3,92 €0,19 €
Zu korrigieren / 1.0007333
Tempo (Median)3,5 Sek.10,4 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Lieferant99,3 %96,7 %
Lieferanten-ID (EIN, IČO…)100,0 %93,3 %
USt-IdNr.100,0 %96,7 %
Rechnungsnummer100,0 %100,0 %
Zahlungsreferenz100,0 %96,0 %
Rechnungsdatum100,0 %96,0 %
Leistungsdatum100,0 %95,3 %
Fälligkeitsdatum100,0 %94,0 %
Netto nach Steuersatz100,0 %98,0 %
Steuer nach Steuersatz100,0 %97,3 %
Gesamtbetrag100,0 %99,3 %
Währung100,0 %100,0 %
Bankverbindung100,0 %86,7 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Spanisch (100 Dokumente)

Gemini 3.8 Flash ist um 0,5 Pp. genauer. Gemma 4 31B ist 38,6× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder95,9 %95,4 %
Fehlerfreie Dokumente95 %54 %
Pro 1.000 Dokumente7,23 €0,19 €
Zu korrigieren / 1.00050460
Tempo (Median)5,3 Sek.8,7 Sek.
Gültige Antworten96,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Lieferant95,0 %95,4 %
Lieferanten-ID (EIN, IČO…)96,0 %93,1 %
USt-IdNr.96,0 %98,9 %
Rechnungsnummer96,0 %100,0 %
Zahlungsreferenz96,0 %95,4 %
Rechnungsdatum96,0 %98,9 %
Leistungsdatum96,0 %100,0 %
Fälligkeitsdatum96,0 %97,7 %
Netto nach Steuersatz96,0 %81,6 %
Steuer nach Steuersatz96,0 %100,0 %
Gesamtbetrag96,0 %100,0 %
Währung96,0 %100,0 %
Bankverbindung96,0 %79,3 %

Dokumente, bei denen sie sich unterscheiden

Rechnungsextraktion · Französisch (100 Dokumente)

Gemini 3.8 Flash ist um 6,4 Pp. genauer. Gemma 4 31B ist 27,8× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,9 %93,6 %
Fehlerfreie Dokumente99 %51 %
Pro 1.000 Dokumente5,68 €0,20 €
Zu korrigieren / 1.00010494
Tempo (Median)5,2 Sek.7,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Lieferant100,0 %96,6 %
Lieferanten-ID (EIN, IČO…)100,0 %77,0 %
USt-IdNr.100,0 %95,4 %
Rechnungsnummer100,0 %97,7 %
Zahlungsreferenz99,0 %96,6 %
Rechnungsdatum100,0 %96,6 %
Leistungsdatum100,0 %94,3 %
Fälligkeitsdatum100,0 %96,6 %
Netto nach Steuersatz100,0 %93,1 %
Steuer nach Steuersatz100,0 %100,0 %
Gesamtbetrag100,0 %100,0 %
Währung100,0 %98,9 %
Bankverbindung100,0 %73,6 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Deutsch (150 Dokumente)

Gemini 3.8 Flash ist um 3,3 Pp. genauer. Gemma 4 31B ist 18,5× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder98,4 %95,1 %
Fehlerfreie Dokumente85 %62 %
Pro 1.000 Dokumente2,52 €0,14 €
Zu korrigieren / 1.000147380
Tempo (Median)2,9 Sek.3,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Kategorie100,0 %100,0 %
Priorität100,0 %78,0 %
Stimmung85,3 %78,0 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Englisch (USA) (150 Dokumente)

Gemini 3.8 Flash ist um 2,2 Pp. genauer. Gemma 4 31B ist 19,8× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder98,7 %96,5 %
Fehlerfreie Dokumente89 %72 %
Pro 1.000 Dokumente2,19 €0,11 €
Zu korrigieren / 1.000113280
Tempo (Median)2,2 Sek.2,2 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Kategorie100,0 %100,0 %
Priorität100,0 %85,3 %
Stimmung88,7 %83,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Tschechisch (150 Dokumente)

Gemini 3.8 Flash ist um 2,1 Pp. genauer. Gemma 4 31B ist 19,3× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,2 %97,1 %
Fehlerfreie Dokumente93 %75 %
Pro 1.000 Dokumente2,82 €0,15 €
Zu korrigieren / 1.00073253
Tempo (Median)2,6 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Kategorie100,0 %100,0 %
Priorität99,3 %85,3 %
Stimmung93,3 %88,7 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Spanisch (100 Dokumente)

Gemini 3.8 Flash ist um 2 Pp. genauer. Gemma 4 31B ist 22,8× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,1 %97,1 %
Fehlerfreie Dokumente92 %74 %
Pro 1.000 Dokumente3,06 €0,13 €
Zu korrigieren / 1.00080260
Tempo (Median)3,1 Sek.2,1 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Kategorie100,0 %100,0 %
Priorität98,0 %82,0 %
Stimmung94,0 %92,0 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

E-Mail-Triage · Französisch (98 Dokumente)

Gemini 3.8 Flash ist um 2,5 Pp. genauer. Gemma 4 31B ist 16,7× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder98,9 %96,4 %
Fehlerfreie Dokumente90 %71 %
Pro 1.000 Dokumente2,48 €0,15 €
Zu korrigieren / 1.000102288
Tempo (Median)2,7 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Kategorie100,0 %100,0 %
Priorität99,0 %82,2 %
Stimmung90,8 %86,3 %
Kundenname100,0 %100,0 %
Bestellnummer100,0 %100,0 %
Rechnungsnummer100,0 %100,0 %
Betrag100,0 %100,0 %
Währung100,0 %100,0 %
Frist100,0 %98,6 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Deutsch (150 Dokumente)

Gemma 4 31B ist um 0,2 Pp. genauer. Gemma 4 31B ist 20,8× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,7 %99,9 %
Fehlerfreie Dokumente98 %99 %
Pro 1.000 Dokumente1,95 €0,09 €
Zu korrigieren / 1.000207
Tempo (Median)2,3 Sek.1,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Namen100,0 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %99,3 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Erkennung personenbezogener Daten · Englisch (USA) (150 Dokumente)

Gemma 4 31B ist um 0,2 Pp. genauer. Gemma 4 31B ist 22,1× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,7 %99,9 %
Fehlerfreie Dokumente98 %99 %
Pro 1.000 Dokumente1,71 €0,08 €
Zu korrigieren / 1.000207
Tempo (Median)1,9 Sek.2,4 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Namen100,0 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %99,3 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Beide Modelle hatten bei allen Beispieldokumenten gleich viele Felder richtig.

Erkennung personenbezogener Daten · Tschechisch (150 Dokumente)

Gemma 4 31B ist um 0,3 Pp. genauer. Gemma 4 31B ist 18,4× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,5 %99,8 %
Fehlerfreie Dokumente97 %99 %
Pro 1.000 Dokumente2,01 €0,11 €
Zu korrigieren / 1.0003313
Tempo (Median)2,0 Sek.2,9 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Namen98,7 %100,0 %
E-Mail-Adressen100,0 %100,0 %
Telefonnummern100,0 %100,0 %
Adressen98,0 %98,7 %
Geburtsdaten100,0 %100,0 %
Identifikationsnummern100,0 %100,0 %
Bankkonten100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Beide Modelle hatten bei allen Beispieldokumenten gleich viele Felder richtig.

Vertragsklauseln · Deutsch (150 Dokumente)

Gemini 3.8 Flash ist um 5,5 Pp. genauer. Gemma 4 31B ist 15,5× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,9 %94,4 %
Fehlerfreie Dokumente99 %27 %
Pro 1.000 Dokumente3,14 €0,20 €
Zu korrigieren / 1.0007727
Tempo (Median)2,6 Sek.2,6 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer99,3 %100,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber99,3 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %100,0 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %27,3 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Englisch (USA) (150 Dokumente)

Gemini 3.8 Flash ist um 0,3 Pp. genauer. Gemma 4 31B ist 13,7× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder99,9 %99,6 %
Fehlerfreie Dokumente99 %97 %
Pro 1.000 Dokumente2,27 €0,17 €
Zu korrigieren / 1.000727
Tempo (Median)2,0 Sek.2,5 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Auftragnehmer99,3 %98,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber99,3 %98,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %99,3 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden

Vertragsklauseln · Tschechisch (150 Dokumente)

Beide sind gleich genau. Gemma 4 31B ist 12,2× günstiger.

KennzahlGemini 3.8 FlashGemma 4 31B
Richtige Felder100,0 %100,0 %
Fehlerfreie Dokumente100 %99 %
Pro 1.000 Dokumente2,84 €0,23 €
Zu korrigieren / 1.00007
Tempo (Median)2,2 Sek.6,0 Sek.
Gültige Antworten100,0 %100,0 %

Genauigkeit pro Feld

FeldGemini 3.8 FlashGemma 4 31B
Auftragnehmer100,0 %100,0 %
ID Auftragnehmer100,0 %100,0 %
Auftraggeber100,0 %100,0 %
ID Auftraggeber100,0 %100,0 %
Vertragsart100,0 %100,0 %
Preis (netto)100,0 %100,0 %
Währung100,0 %100,0 %
Abrechnungszeitraum100,0 %100,0 %
Wirksam ab100,0 %99,3 %
Vertragsende100,0 %100,0 %
Kündigungsfrist (Monate)100,0 %100,0 %
Verzugsstrafe (% pro Tag)100,0 %100,0 %
Anwendbares Recht100,0 %100,0 %

Dokumente, bei denen sie sich unterscheiden