- Rang
- #133
- Total des jetons de sortie
- 32,506
- Temps de réponse (moy.)
- 11.87s
- Coût total
- $3.197
Claude Fable 5.1 (medium) vs Gemma 4 26B A4B (medium)
Le score moyen est pratiquement à égalité avec 7.3 vs 7.3. Gemma 4 26B A4B (medium) a le coût de benchmark le plus bas avec $0.101 vs $3.197. Claude Fable 5.1 (medium) est plus rapide avec 11.87s vs 105.03s, avec des taux de réussite de 78.3% vs 71.0%.
Modèles comparés
- Rang
- #131
- Total des jetons de sortie
- 269,351
- Temps de réponse (moy.)
- 105.03s
- Coût total
- $0.101
Modèle recommandé
Gemma 4 26B A4B (medium)
Il obtient le meilleur score ici (7.3) tout en coûtant environ 31.7x moins que Claude Fable 5.1 (medium).
Comparaison détaillée
| Métrique | Claude Fable 5.1 Claude Fable 5.1 medium | Gemma 4 26B A4B Gemma 4 26B A4B medium Disponible gratuitement |
|---|---|---|
| Score | 7.3 | 7.3 |
| Rang | #133 | #131 |
| Fiabilité | 10.0 | 10.0 |
| Cohérence | 7.9 | 9.6 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 78.3% | 71.0% |
| Tests instables | 6 | 1 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 21.312 | 0.679 |
| Coût total | $3.197 | $0.101 |
| Prix d'entrée | $10.000 / 1M | $0.090 / 1M |
| Prix de sortie | $50.000 / 1M | $0.300 / 1M |
| Prix de lecture du cache | $0.250 / 1M | $0.050 / 1M |
| Prix d’écriture du cache | $12.500 / 1M | N/D |
| Total des jetons d'entrée | 157,142 | 224,367 |
| Jetons de sortie | 8,149 | 27,095 |
| Jetons de raisonnement | 24,357 | 242,256 |
| Temps de réponse (moy.) | 11.87s | 105.03s |
| Temps de réponse (max) | 36.59s | 912.19s |
| Temps de réponse (total) | 272.91s | 2310.63s |
| Paramètres | ~9.5T au total (~878B actifs) | 25.2B au total (3.8B actifs) |
| Disponibilité | Source fermée | Open source |
Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#133 Claude Fable 5.1
medium- Coût
- $0.244
- Temps
- 65.9s
- Tokens
- 5,025 tok
#131 Gemma 4 26B A4B
medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
- Coût
- $0.000
- Temps
- 300.0s
- Tokens
- 0 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 3.0 | 10.0 | 0.0% | 0 | 16.18s | 22,030 | 555 | 799 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 107.12s | 146,839 | 1,047 | 14,658 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 8.2 | 7.9 | 83.3% | 1 | 5.18s | 858 | 485 | 334 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 6.20s | 816 | 1,142 | 3,045 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 7.0 | 5.0 | 77.8% | 2 | 10.99s | 10,608 | 525 | 4,376 | |
| Gemma 4 26B A4B | 2.9 | 10.0 | 0.0% | 0 | 272.54s | 5,062 | 14,838 | 44,567 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 32.59s | 97,573 | 4,993 | 4,831 | |
| Gemma 4 26B A4B | 6.3 | 10.0 | 50.0% | 0 | 492.87s | 54,390 | 5,451 | 132,113 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 4.47s | 10,515 | 312 | 0 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 16.51s | 8,334 | 1,567 | 2,827 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 7.7 | 10.0 | 66.7% | 0 | 19.29s | 990 | 63 | 9,185 | |
| Gemma 4 26B A4B | 5.3 | 7.2 | 44.4% | 1 | 35.14s | 494 | 481 | 15,212 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 5.14s | 714 | 280 | 0 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 29.76s | 567 | 25 | 5,075 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 7.3 | 5.8 | 83.3% | 1 | 5.77s | 921 | 146 | 183 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 17.54s | 777 | 887 | 4,470 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 7.6 | 7.2 | 77.8% | 1 | 5.70s | 912 | 422 | 352 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 5.79s | 801 | 410 | 2,128 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 12.99s | 11,757 | 354 | 0 | |
| Gemma 4 26B A4B | 10.0 | 10.0 | 100.0% | 0 | 9.01s | 6,096 | 450 | 1,256 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Claude Fable 5.1 | 2.8 | 1.6 | 33.3% | 1 | 24.32s | 264 | 14 | 4,297 | |
| Gemma 4 26B A4B | 3.0 | 10.0 | 0.0% | 0 | 180.87s | 191 | 797 | 16,905 |
Comparaison rapide
Changer la paire de comparaison
Claude Fable 5.1mediumvsGLM 5.3 FlashhighGemma 4 26B A4BmediumDisponible gratuitementvsGLM 5.3 FlashhighClaude Fable 5.1mediumvsLongCat 2.0highDeepSeek V4 Pro 0423nonevsGemma 4 26B A4BmediumDisponible gratuitementGemma 4 26B A4BmediumDisponible gratuitementvsInkling SmallhighDisponible gratuitementGemma 4 26B A4BmediumDisponible gratuitementvsGrok 4.7lowGemma 4 26B A4BmediumDisponible gratuitementvsGLM 5.3 FlashXhighGemma 4 26B A4BmediumDisponible gratuitementvsLongCat 2.0highClaude Fable 5.1mediumvsQwen3.5-27BnoneClaude Fable 5.1mediumvsDeepSeek V4 Pro 0423noneDeepSeek V4 Flash 0731lowvsGemma 4 26B A4BmediumDisponible gratuitementClaude Fable 5.1mediumvsInkling SmallhighDisponible gratuitement