Navigation
Advertise here

Granite 4.1 8B vs Mercury 2.5

Granite 4.1 8B mène au score moyen avec 4.0 vs 3.9. Granite 4.1 8B a le coût de benchmark le plus bas avec $0.007 vs $0.016. Granite 4.1 8B est plus rapide avec 1.44s vs 2.45s, avec des taux de réussite de 9.1% vs 25.8%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-08

Modèles comparés

Rang
#309
Total des jetons de sortie
5,996
Temps de réponse (moy.)
1.44s
Coût total
$0.007
Rang
#312
Total des jetons de sortie
71,143
Temps de réponse (moy.)
2.45s
Coût total
$0.016
Modèle recommandé Granite 4.1 8B

Il obtient le meilleur score ici (4.0) tout en coûtant environ 2.5x moins que Mercury 2.5.

Comparaison détaillée

Métrique Granite 4.1 8B Granite 4.1 8B none Sortie: 2026-05-01 Mercury 2.5 Mercury 2.5 none Sortie: 2026-09-08
Score 4.0 3.9
Rang #309 #312
Fiabilité 10.0 10.0
Cohérence 10.0 7.5
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 9.1% 25.8%
Tests instables 0 7
Exécutions totales 66 66
Coût par résultat 0.315 0.782
Coût total $0.007 $0.016
Prix d'entrée $0.050 / 1M $0.040 / 1M
Prix de sortie $0.100 / 1M $0.150 / 1M
Total des jetons d'entrée 113,836 123,740
Jetons de sortie 5,996 71,143
Jetons de raisonnement 0 0
Temps de réponse (moy.) 1.44s 2.45s
Temps de réponse (max) 16.67s 36.48s
Temps de réponse (total) 31.75s 53.83s
Paramètres 8B ~100B
Disponibilité Open source Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#309 IBM: Granite 4.1 8B

none
Coût
$0.001
Temps
3.2s
Tokens
491 tok

#312 Mercury 2.5

none
Coût
$0.001
Temps
2.7s
Tokens
2,749 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0

Comparaison rapide

Changer la paire de comparaison