- Rang
- #164
- Total des jetons de sortie
- 277,315
- Temps de réponse (moy.)
- 78.76s
- Coût total
- $0.144
Gemma 4 31B (medium) vs Mercury 2.5 Preview (medium)
Gemma 4 31B (medium) mène au score moyen avec 6.9 vs 6.8. Mercury 2.5 Preview (medium) a le coût de benchmark le plus bas avec $0.039 vs $0.144. Mercury 2.5 Preview (medium) est plus rapide avec 6.66s vs 78.76s, avec des taux de réussite de 66.7% vs 66.7%.
Modèles comparés
- Rang
- #171
- Total des jetons de sortie
- 150,107
- Temps de réponse (moy.)
- 6.66s
- Coût total
- $0.039
Modèle recommandé
Mercury 2.5 Preview (medium)
Son score reste proche du meilleur score ici (6.8 vs 6.9) tout en coûtant environ 3.7x moins que Gemma 4 31B (medium).
Comparaison détaillée
| Métrique | Gemma 4 31B Gemma 4 31B medium Disponible gratuitement | Mercury 2.5 Preview Mercury 2.5 Preview medium |
|---|---|---|
| Score | 6.9 | 6.8 |
| Rang | #164 | #171 |
| Fiabilité | 10.0 | 10.0 |
| Cohérence | 8.7 | 9.6 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 66.7% | 66.7% |
| Tests instables | 3 | 1 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 1.195 | 0.244 |
| Coût total | $0.144 | $0.039 |
| Prix d'entrée | $0.090 / 1M | $0.040 / 1M |
| Prix de sortie | $0.340 / 1M | $0.150 / 1M |
| Prix de lecture du cache | $0.050 / 1M | N/D |
| Prix d’écriture du cache | N/D | N/D |
| Total des jetons d'entrée | 251,164 | 397,291 |
| Jetons de sortie | 36,112 | 6,355 |
| Jetons de raisonnement | 241,203 | 143,752 |
| Temps de réponse (moy.) | 78.76s | 6.66s |
| Temps de réponse (max) | 437.40s | 74.63s |
| Temps de réponse (total) | 1653.96s | 153.29s |
| Paramètres | 30.7B | ~100B |
| Disponibilité | Open source | Source fermée |
Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#164 Gemma 4 31B
medium- Coût
- $0.002
- Temps
- 45.7s
- Tokens
- 2,696 tok
#171 Mercury 2.5 Preview
medium- Coût
- $0.001
- Temps
- 2.7s
- Tokens
- 2,241 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 82.13s | 156,195 | 1,713 | 8,181 | |
| Mercury 2.5 Preview | 3.9 | 9.6 | 0.0% | 0 | 74.63s | 284,578 | 919 | 22,154 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 12.89s | 816 | 962 | 2,046 | |
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.43s | 781 | 203 | 7,921 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 4.3 | 5.8 | 22.2% | 1 | 219.76s | 5,568 | 11,098 | 33,212 | |
| Mercury 2.5 Preview | 7.8 | 10.0 | 66.7% | 0 | 3.86s | 7,839 | 552 | 22,126 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 2.9 | 5.8 | 16.7% | 1 | 433.11s | 77,035 | 12,112 | 157,552 | |
| Mercury 2.5 Preview | 6.5 | 10.0 | 50.0% | 0 | 13.86s | 92,663 | 3,607 | 41,588 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 21.11s | 8,334 | 1,822 | 2,951 | |
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 2.77s | 8,292 | 514 | 11,354 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 5.3 | 7.2 | 44.4% | 1 | 59.92s | 853 | 4,280 | 18,729 | |
| Mercury 2.5 Preview | 5.3 | 7.2 | 44.4% | 1 | 3.72s | 853 | 62 | 17,120 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 9.57s | 567 | 105 | 888 | |
| Mercury 2.5 Preview | 5.0 | 10.0 | 0.0% | 0 | 2.09s | 538 | 99 | 3,375 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 12.76s | 777 | 533 | 2,035 | |
| Mercury 2.5 Preview | 9.8 | 10.0 | 100.0% | 0 | 1.35s | 744 | 96 | 3,987 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 9.9 | 10.0 | 100.0% | 0 | 26.91s | 801 | 1,795 | 5,595 | |
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.87s | 771 | 274 | 7,323 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 | |
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 2.37s | 0 | 0 | 0 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 90.14s | 218 | 1,692 | 10,014 | |
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 4.13s | 232 | 29 | 6,804 |
Comparaison rapide
Changer la paire de comparaison
Mercury 2.5 PreviewmediumvsInklinglowDisponible gratuitementGemma 4 31BmediumDisponible gratuitementvsGPT-5.6 LunalowClaude Sonnet 5.5lowvsGemma 4 31BmediumDisponible gratuitementClaude Opus 4.8nonevsGemma 4 31BmediumDisponible gratuitementEmber-1highvsGemma 4 31BmediumDisponible gratuitementMercury 2.5 PreviewmediumvsGPT-6 SolnoneClaude Opus 4.8nonevsMercury 2.5 PreviewmediumClaude Sonnet 5.5lowvsMercury 2.5 PreviewmediumMercury 2.5 PreviewmediumvsGPT-5.6 LunalowGemma 4 31BmediumDisponible gratuitementvsInklinglowDisponible gratuitementEmber-1highvsMercury 2.5 PreviewmediumMercury 2.5 PreviewmediumvsSpace Bunny Alphamax