Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 2.5 Flash vs OpenAI: GPT-5.4

Zusammenfassung

Gemini 2.5 Flash vs GPT-5.4 Benchmark-Vergleich: Gemini 2.5 Flash führt beim Durchschnittsscore mit 6.2 vs 5.8. Gemini 2.5 Flash hat die niedrigeren Benchmark-Kosten mit $0.016 vs $0.122. Gemini 2.5 Flash ist schneller mit 875ms vs 1.42s, mit Erfolgsraten von 46.0% vs 36.5%.

Empfohlenes Modell: Gemini 2.5 Flash - Es hat hier die beste Punktzahl (6.2) und kostet etwa 8.0x weniger als GPT-5.4.

Benchmarks aus AI BENCHY-Test-Suites generiert am: 2026-06-18

Metrik Gemini 2.5 Flash Gemini 2.5 Flash none Veröffentlichung: 2025-06-17 GPT-5.4 GPT-5.4 none Veröffentlichung: 2026-03-05
Punktzahl 6.2 5.8
Rang #93 #112
Zuverlässigkeit 10.0 10.0
Konsistenz 9.6 9.2
Korrekte Tests
Erfolgsquote pro Versuch 46.0% 36.5%
Instabile Tests 1 2
Gesamtläufe 63 63
Kosten pro Ergebnis 0.169 1.740
Gesamtkosten $0.016 $0.122
Eingabepreis $0.300 / 1M $2.500 / 1M
Ausgabepreis $2.500 / 1M $15.000 / 1M
Gesamte Eingabe-Token 35,926 34,212
Ausgabe-Token 1,770 2,417
Denk-Token 0 0
Antwortzeit (Durchschnitt) 875ms 1.42s
Antwortzeit (Maximum) 4.39s 2.95s
Antwortzeit (Gesamt) 18.37s 29.87s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#93 Gemini 2.5 Flash

none
Ungültiges SVG
Kosten
$0.164
Zeit
215.5s
Token
65,659 tok

#112 GPT-5.4

none
Kosten
$0.026
Zeit
18.1s
Token
1,792 tok

Top-Modelle nach Score

Score vs. Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Kategorieaufschlüsselung

Anti-KI-Tricks Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 3.0 10.0 0.0% 0 582ms 492 102 0
GPT-5.4 3.2 8.0 8.3% 1 1.21s 606 406 0
Programmierung Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0
Kombiniert Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 3.0 10.0 0.0% 0 4.39s 12,519 366 0
GPT-5.4 3.0 10.0 0.0% 0 2.89s 11,019 291 0
Datenanalyse und -extraktion Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 10.0 10.0 100.0% 0 652ms 7,257 279 0
GPT-5.4 10.0 10.0 100.0% 0 1.04s 7,140 222 0
Domänenspezifisch Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 5.9 7.2 55.6% 1 495ms 633 12 0
GPT-5.4 5.3 7.2 44.4% 1 1.07s 723 50 0
Allgemeine Intelligenz Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 5.0 10.0 0.0% 0 615ms 486 78 0
GPT-5.4 4.4 9.9 0.0% 0 1.78s 477 184 0
Befolgung von Anweisungen Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 10.0 10.0 100.0% 0 590ms 615 72 0
GPT-5.4 6.5 10.0 50.0% 0 1.07s 660 81 0
Rätsellösen Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 7.7 10.0 66.7% 0 604ms 558 132 0
GPT-5.4 5.6 9.8 33.3% 0 1.44s 642 381 0
Werkzeugaufrufe Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 10.0 10.0 100.0% 0 1.91s 5,088 234 0
GPT-5.4 10.0 10.0 100.0% 0 2.75s 5,445 246 0
Allgemeinwissen Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Gemini 2.5 Flash 3.0 10.0 0.0% 0 1.15s 156 12 0
GPT-5.4 3.0 10.0 0.0% 0 990ms 195 40 0

Schnellvergleich

Vergleichspaar wechseln