Navigation
AI BENCHY
Advertise here

Gemini 3.1 Flash Lite Preview (low) vs Mercury 2.5 Preview (high)

Le score moyen est pratiquement à égalité avec 6.6 vs 6.6. Mercury 2.5 Preview (high) a le coût de benchmark le plus bas avec $0.030 vs $0.646. Mercury 2.5 Preview (high) est plus rapide avec 4.01s vs 16.67s, avec des taux de réussite de 63.6% vs 65.2%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-02

Rang
#153
Total des jetons de sortie
412,179
Temps de réponse (moy.)
16.67s
Coût total
$0.646
Rang
#157
Total des jetons de sortie
163,505
Temps de réponse (moy.)
4.01s
Coût total
$0.030
Modèle recommandé Mercury 2.5 Preview (high)

Il obtient le meilleur score ici (6.6) tout en coûtant environ 22.2x moins que Gemini 3.1 Flash Lite Preview (low).

Comparaison détaillée

Métrique Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview low Sortie: 2026-03-03 Mercury 2.5 Preview Mercury 2.5 Preview high Sortie: 2026-09-02
Score 6.6 6.6
Rang #153 #157
Fiabilité 10.0 10.0
Cohérence 10.0 8.2
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 63.6% 65.2%
Tests instables 0 5
Exécutions totales 66 66
Coût par résultat 4.613 0.243
Coût total $0.646 $0.030
Prix d'entrée $0.250 / 1M $0.040 / 1M
Prix de sortie $1.500 / 1M $0.150 / 1M
Total des jetons d'entrée 110,196 115,759
Jetons de sortie 14,717 2,562
Jetons de raisonnement 397,462 160,943
Temps de réponse (moy.) 16.67s 4.01s
Temps de réponse (max) 309.35s 17.71s
Temps de réponse (total) 366.69s 88.25s
Paramètres ~150B au total (~10B actifs) ~100B
Disponibilité Source fermée Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#153 Gemini 3.1 Flash Lite Preview

low
Coût
$0.002
Temps
3.7s
Tokens
1,203 tok

#157 Mercury 2.5 Preview

high
Coût
$0.001
Temps
4.5s
Tokens
3,851 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.1 Flash Lite Preview 5.5 10.0 33.3% 0 1.39s 8,138 660 1,060
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569

Comparaison rapide

Changer la paire de comparaison