AI BENCHY
Advertise here
#24

Gemini 2.5 Flash

Google Veröffentlichung: 2025-06-17 Getestet am: 2026-06-04 14:01 google/gemini-2.5-flash::medium
(medium) (none)

Zusammenfassung

Gemini 2.5 Flash erreicht 8.2 bei AI BENCHY und liegt auf #24. Das Modell hat 10.0 Zuverlässigkeit, 69.8% Erfolgsrate, $0.379 Gesamtkosten und 15.49s durchschnittliche Antwortzeit.

Was Gemini 2.5 Flash besonders macht: Am stärksten ist es in Domänenspezifisch, wo es #2 erreicht; am schwächsten ist Befolgung von Anweisungen mit #12.

Punktzahl

8.2

Konsistenz

9.6

Gesamte Ausgabe-Token

147,075

Gesamte Eingabe-Token

34,476

Eingabepreis

$0.300 / 1M

Ausgabepreis

$2.500 / 1M

Korrekte Tests

Falsche Tests: 7

Erfolgsquote pro Versuch: 69.8%

Instabile Tests

1

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

15.49s

Antwortzeit (Maximum): 95.48s

Antwortzeit (Gesamt): 325.39s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#24 Gemini 2.5 Flash

medium
Ungültiges SVG
Kosten
$0.000
Zeit
274.0s
Token
0 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-06-04 14:01 Neuer Test hinzugefügt 7.8 10.0 $0.379 Aktueller Lauf
2026-05-22 00:32 Suite geändert 7.7 10.0 $0.358 Vergleichen
2026-04-11 01:44 Erster erfasster Lauf 8.2 k. A. $0.319 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-06-04 14:01 · Aktueller Lauf8.29.610.014/211147,07534,476$0.37915.49s
2026-05-22 00:32 · Suite geändert7.79.610.013/201139,1790$0.35815.69s
Differenz+0.50.00.0+10+7896+34476+$0.021-193ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-04 15:40 $0.300 / 1M $2.500 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.4 10.0
Programmierung 7.8 10.0
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 5.9 7.2
Allgemeine Intelligenz 4.8 10.0
Befolgung von Anweisungen 9.8 10.0
Rätsellösen 7.7 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle