Navigare
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Gemini 3.1 Flash Lite Preview (medium) vs Mercury 2.5 Preview (medium)

Scorul mediu este practic egal la 7.4 vs 7.5. Mercury 2.5 Preview (medium) are costul de benchmark mai mic, $0.024 vs $0.117. Mercury 2.5 Preview (medium) este mai rapid cu 3.58s vs 4.59s, cu rate de reușită de 63.6% vs 69.7%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-02

Rang
#94
Total tokenuri de ieșire
57,778
Timp de răspuns (mediu)
4.59s
Cost total
$0.117
Rang
#91
Total tokenuri de ieșire
127,034
Timp de răspuns (mediu)
3.58s
Cost total
$0.024
Model recomandat Mercury 2.5 Preview (medium)

Are cel mai bun scor aici (7.5) și costă de aproximativ 4.9x mai puțin decât Gemini 3.1 Flash Lite Preview (medium).

Comparație detaliată

Metrică Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview medium Lansare: 2026-03-03 Mercury 2.5 Preview Mercury 2.5 Preview medium Lansare: 2026-09-02
Scor 7.4 7.5
Rang #94 #91
Fiabilitate 10.0 10.0
Consistență 9.9 9.6
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 63.6% 69.7%
Teste instabile 0 1
Rulări totale 66 66
Cost per rezultat 0.829 0.158
Cost total $0.117 $0.024
Preț de intrare $0.250 / 1M $0.040 / 1M
Preț de ieșire $1.500 / 1M $0.150 / 1M
Total tokenuri de intrare 117,493 112,713
Tokenuri de ieșire 10,589 5,436
Tokenuri de raționament 47,189 121,598
Timp de răspuns (mediu) 4.59s 3.58s
Timp de răspuns (maxim) 18.34s 17.84s
Timp de răspuns (total) 101.04s 78.66s
Parametri ~150B în total (~10B activi) ~100B
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#94 Gemini 3.1 Flash Lite Preview

medium
Cost
$0.003
Timp
5.2s
Tokenuri
1,944 tok

#91 Mercury 2.5 Preview

medium
Cost
$0.001
Timp
2.7s
Tokenuri
2,241 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Gemini 3.1 Flash Lite Preview 5.5 10.0 33.3% 0 4.09s 8,126 461 8,597
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126

Comparație rapidă

Schimbă perechea de comparație