- Rang
- #273
- Total des jetons de sortie
- 1,818,271
- Temps de réponse (moy.)
- 140.39s
- Coût total
- $0.000
North Mini Code (medium) vs Ember-1
Le score moyen est pratiquement à égalité avec 5.4 vs 5.4. North Mini Code (medium) a le coût de benchmark le plus bas avec $0.000 vs $0.786. Ember-1 est plus rapide avec 22.65s vs 140.39s, avec des taux de réussite de 42.0% vs 43.5%.
Modèles comparés
- Rang
- #277
- Total des jetons de sortie
- 11,832
- Temps de réponse (moy.)
- 22.65s
- Coût total
- $0.786
Modèle recommandé
Ember-1
Il obtient le meilleur score ici (5.4) et répond environ 6.2x plus vite que North Mini Code (medium).
Comparaison détaillée
| Métrique | North Mini Code North Mini Code medium Disponible gratuitement | Ember-1 Ember-1 none |
|---|---|---|
| Score | 5.4 | 5.4 |
| Rang | #273 | #277 |
| Fiabilité | 8.9 | 8.8 |
| Cohérence | 8.6 | 8.6 |
| Tentatives | 61/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 42.0% | 43.5% |
| Tests instables | 4 | 4 |
| Exécutions totales | 61 | 69 |
| Coût par résultat | 0.000 | 9.817 |
| Coût total | $0.000 | $0.786 |
| Prix d'entrée | $0.000 / 1M | $3.000 / 1M |
| Prix de sortie | $0.000 / 1M | $15.000 / 1M |
| Total des jetons d'entrée | 166,347 | 202,617 |
| Jetons de sortie | 423,884 | 11,832 |
| Jetons de raisonnement | 1,394,387 | 0 |
| Temps de réponse (moy.) | 140.39s | 22.65s |
| Temps de réponse (max) | 786.72s | 93.12s |
| Temps de réponse (total) | 3229.07s | 520.91s |
| Paramètres | 30B au total (3B actifs) | ~2.8T au total (~104B actifs) |
| Disponibilité | Open source | Source fermée |
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#273 North Mini Code
medium- Coût
- $0.000
- Temps
- 51.8s
- Tokens
- 12,460 tok
#277 Ember-1
none- Coût
- $0.156
- Temps
- 224.6s
- Tokens
- 10,555 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 3.9 | 9.6 | 0.0% | 0 | 105.20s | 84,605 | 0 | 53,480 | |
| Ember-1 | 6.1 | 3.1 | 66.7% | 1 | 92.87s | 175,191 | 9,168 | 0 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 8.4 | 10.0 | 75.0% | 0 | 64.79s | 324 | 64,441 | 68,535 | |
| Ember-1 | 5.2 | 7.9 | 41.7% | 1 | 22.37s | 796 | 867 | 0 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 4.5 | 4.9 | 33.3% | 2 | 320.43s | 7,119 | 219,891 | 561,569 | |
| Ember-1 | 5.5 | 10.0 | 33.3% | 0 | 1.94s | 7,485 | 393 | 0 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 2.9 | 5.8 | 16.7% | 1 | 554.89s | 63,682 | 0 | 472,040 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 49.01s | 12,162 | 327 | 0 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 10.0 | 10.0 | 100.0% | 0 | 24.06s | 6,819 | 240 | 2,659 | |
| Ember-1 | 6.4 | 5.9 | 66.7% | 1 | 35.25s | 4,017 | 161 | 0 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 2.9 | 7.2 | 11.1% | 1 | 107.19s | 550 | 7,595 | 102,957 | |
| Ember-1 | 5.3 | 10.0 | 33.3% | 0 | 21.61s | 804 | 68 | 0 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 5.1 | 10.0 | 0.0% | 0 | 25.08s | 444 | 1,546 | 1,635 | |
| Ember-1 | 5.0 | 10.0 | 0.0% | 0 | 2.28s | 540 | 160 | 0 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 9.8 | 10.0 | 100.0% | 0 | 15.43s | 379 | 909 | 1,339 | |
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 31.00s | 509 | 81 | 0 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 3.3 | 10.0 | 0.0% | 0 | 19.70s | 543 | 2,215 | 2,485 | |
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 2.54s | 840 | 569 | 0 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 10.0 | 10.0 | 100.0% | 0 | 3.93s | 1,776 | 41 | 563 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.44s | 0 | 0 | 0 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 3.0 | 10.0 | 0.0% | 0 | 305.02s | 106 | 127,006 | 127,125 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 273 | 38 | 0 |
Comparaison rapide
Changer la paire de comparaison
Ember-1nonevsStep 3.5 FlashmediumNorth Mini CodemediumDisponible gratuitementvsHy4 previewlowNorth Mini CodemediumDisponible gratuitementvsQwen3.8 27BnoneDisponible gratuitementNorth Mini CodemediumDisponible gratuitementvsMiMo-V2.6-FlashnoneEmber-1nonevsHy4 previewlowEmber-1nonevsGranite 4.2 8BlowSeed-2.0-CodenonevsNorth Mini CodemediumDisponible gratuitementNorth Mini CodemediumDisponible gratuitementvsGPT-5.6 LunanoneNorth Mini CodemediumDisponible gratuitementvsGemma 4 26B A4BnoneDisponible gratuitementNorth Mini CodemediumDisponible gratuitementvsGranite 4.2 8BlowNorth Mini CodemediumDisponible gratuitementvsGPT-6 LunanoneNorth Mini CodemediumDisponible gratuitementvsGemini 2.5 Flashnone