Navigation
Advertise here

Granite 4.2 8B (high) vs Mercury 2.5

Granite 4.2 8B (high) mène au score moyen avec 4.6 vs 3.9. Mercury 2.5 a le coût de benchmark le plus bas avec $0.016 vs $0.084. Mercury 2.5 est plus rapide avec 2.45s vs 235.89s, avec des taux de réussite de 39.4% vs 25.8%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-08

Modèles comparés

Rang
#293
Total des jetons de sortie
612,215
Temps de réponse (moy.)
235.89s
Coût total
$0.084
Rang
#312
Total des jetons de sortie
71,143
Temps de réponse (moy.)
2.45s
Coût total
$0.016
Modèle recommandé Mercury 2.5

Son score reste proche du meilleur score ici (3.9 vs 4.6) tout en coûtant environ 5.3x moins que Granite 4.2 8B (high).

Comparaison détaillée

Métrique Granite 4.2 8B Granite 4.2 8B high Sortie: 2026-09-02 Mercury 2.5 Mercury 2.5 none Sortie: 2026-09-08
Score 4.6 3.9
Rang #293 #312
Fiabilité 7.6 10.0
Cohérence 6.3 7.5
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 39.4% 25.8%
Tests instables 10 7
Exécutions totales 66 66
Coût par résultat 2.085 0.782
Coût total $0.084 $0.016
Prix d'entrée $0.100 / 1M $0.040 / 1M
Prix de sortie $0.150 / 1M $0.150 / 1M
Total des jetons d'entrée 43,278 123,740
Jetons de sortie 181,083 71,143
Jetons de raisonnement 431,132 0
Temps de réponse (moy.) 235.89s 2.45s
Temps de réponse (max) 685.87s 36.48s
Temps de réponse (total) 5189.64s 53.83s
Paramètres 8B ~100B
Disponibilité Open source Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 IBM: Granite 4.2 8B

high
Provider returned error
Coût
$0.000
Temps
0.2s
Tokens
0 tok

#312 Mercury 2.5

none
Coût
$0.001
Temps
2.7s
Tokens
2,749 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Granite 4.2 8B 3.8 4.3 33.3% 2 515.34s 7,047 42,438 154,749
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0

Comparaison rapide

Changer la paire de comparaison