- Rang
- #163
- Total des jetons de sortie
- 121,223
- Temps de réponse (moy.)
- 58.14s
- Coût total
- $2.405
Ember-1 (high) vs Gemini 3 Flash Preview (low)
Gemini 3 Flash Preview (low) mène au score moyen avec 6.9 vs 6.9. Gemini 3 Flash Preview (low) a le coût de benchmark le plus bas avec $0.254 vs $2.405. Gemini 3 Flash Preview (low) est plus rapide avec 8.51s vs 58.14s, avec des taux de réussite de 71.0% vs 72.5%.
Modèles comparés
- Rang
- #160
- Total des jetons de sortie
- 42,400
- Temps de réponse (moy.)
- 8.51s
- Coût total
- $0.254
Modèle recommandé
Gemini 3 Flash Preview (low)
Il obtient le meilleur score ici (6.9) tout en coûtant environ 9.5x moins que Ember-1 (high).
Comparaison détaillée
| Métrique | Ember-1 Ember-1 high | Gemini 3 Flash Preview Gemini 3 Flash Preview low |
|---|---|---|
| Score | 6.9 | 6.9 |
| Rang | #163 | #160 |
| Fiabilité | 8.6 | 10.0 |
| Cohérence | 7.2 | 9.3 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 71.0% | 72.5% |
| Tests instables | 8 | 2 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 20.041 | 1.582 |
| Coût total | $2.405 | $0.254 |
| Prix d'entrée | $3.000 / 1M | $0.500 / 1M |
| Prix de sortie | $15.000 / 1M | $3.000 / 1M |
| Total des jetons d'entrée | 195,489 | 251,677 |
| Jetons de sortie | 12,475 | 11,196 |
| Jetons de raisonnement | 108,748 | 31,204 |
| Temps de réponse (moy.) | 58.14s | 8.51s |
| Temps de réponse (max) | 255.06s | 52.64s |
| Temps de réponse (total) | 1337.19s | 195.76s |
| Paramètres | ~2.8T au total (~104B actifs) | ~500B au total (~20B actifs) |
| Disponibilité | Source fermée | Source fermée |
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#163 Ember-1
high- Coût
- $0.038
- Temps
- 55.1s
- Tokens
- 2,671 tok
#160 Gemini 3 Flash Preview
low- Coût
- $0.007
- Temps
- 12.1s
- Tokens
- 2,289 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.1 | 3.1 | 66.7% | 1 | 88.31s | 146,912 | 5,130 | 5,968 | |
| Gemini 3 Flash Preview | 5.0 | 10.0 | 0.0% | 0 | 52.64s | 127,990 | 1,624 | 0 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 8.7 | 7.9 | 91.7% | 1 | 24.05s | 1,544 | 886 | 992 | |
| Gemini 3 Flash Preview | 10.0 | 10.0 | 100.0% | 0 | 3.48s | 500 | 281 | 3,082 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 8.2 | 7.2 | 88.9% | 1 | 72.23s | 7,144 | 1,281 | 23,093 | |
| Gemini 3 Flash Preview | 5.8 | 7.2 | 44.4% | 1 | 6.00s | 8,122 | 456 | 7,421 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 79.89s | 28,994 | 1,667 | 6,614 | |
| Gemini 3 Flash Preview | 3.0 | 10.0 | 0.0% | 0 | 10.20s | 99,775 | 7,822 | 0 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 7.3 | 5.9 | 83.3% | 1 | 36.10s | 6,076 | 230 | 1,228 | |
| Gemini 3 Flash Preview | 10.0 | 10.0 | 100.0% | 0 | 9.40s | 7,261 | 279 | 3,656 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 2.9 | 4.4 | 22.2% | 2 | 175.49s | 1,154 | 1,023 | 61,582 | |
| Gemini 3 Flash Preview | 5.3 | 7.2 | 44.4% | 1 | 9.74s | 648 | 12 | 9,096 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 4.49s | 744 | 194 | 304 | |
| Gemini 3 Flash Preview | 10.0 | 10.0 | 100.0% | 0 | 3.68s | 492 | 120 | 981 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 7.1 | 5.8 | 83.3% | 1 | 33.38s | 992 | 162 | 784 | |
| Gemini 3 Flash Preview | 9.9 | 10.0 | 100.0% | 0 | 7.02s | 621 | 71 | 2,752 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 4.84s | 1,452 | 390 | 848 | |
| Gemini 3 Flash Preview | 10.0 | 10.0 | 100.0% | 0 | 5.77s | 562 | 288 | 3,168 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.45s | 0 | 0 | 0 | |
| Gemini 3 Flash Preview | 10.0 | 10.0 | 100.0% | 0 | 4.99s | 5,550 | 234 | 415 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 65.34s | 477 | 1,512 | 7,335 | |
| Gemini 3 Flash Preview | 10.0 | 10.0 | 100.0% | 0 | 2.75s | 156 | 9 | 633 |
Comparaison rapide
Changer la paire de comparaison
Ember-1highvsGemini 3.1 Flash LitemediumGemini 3 Flash PreviewlowvsQwen3.5-122B-A10BmediumEmber-1highvsGemma 4 31BmediumDisponible gratuitementEmber-1highvsGPT-5.6 LunalowClaude Sonnet 5.5lowvsEmber-1highClaude Opus 4.8nonevsEmber-1highEmber-1highvsKimi K2.6mediumGemini 3 Flash PreviewlowvsKimi K2.7 CodemediumEmber-1highvsQwen3.5-FlashmediumEmber-1highvsInklinglowDisponible gratuitementEmber-1highvsMercury 2.5 PreviewmediumEmber-1highvsMuse Glimmer 30Blow