- Rang
- #259
- Total tokenuri de ieșire
- 82,585
- Timp de răspuns (mediu)
- 3.51s
- Cost total
- $0.018
Mercury 2.5 Preview vs Mistral Small 4 (medium)
Mistral Small 4 (medium) conduce la scorul mediu cu 5.1 vs 4.9. Mercury 2.5 Preview are costul de benchmark mai mic, $0.018 vs $0.097. Mercury 2.5 Preview este mai rapid cu 3.51s vs 10.80s, cu rate de reușită de 30.3% vs 43.9%.
- Rang
- #246
- Total tokenuri de ieșire
- 133,597
- Timp de răspuns (mediu)
- 10.80s
- Cost total
- $0.097
Model recomandat
Mercury 2.5 Preview
Scorul rămâne aproape de cel mai bun scor de aici (4.9 vs 5.1) și costă de aproximativ 5.5x mai puțin decât Mistral Small 4 (medium).
Comparație detaliată
| Metrică | Mercury 2.5 Preview Mercury 2.5 Preview none | Mistral Small 4 Mistral Small 4 medium |
|---|---|---|
| Scor | 4.9 | 5.1 |
| Rang | #259 | #246 |
| Fiabilitate | 10.0 | 10.0 |
| Consistență | 8.3 | 7.0 |
| Încercări | 66/66 | 66/66 |
| Teste corecte | ||
| Rată de trecere pe încercare | 30.3% | 43.9% |
| Teste instabile | 5 | 8 |
| Rulări totale | 66 | 66 |
| Cost per rezultat | 0.440 | 1.923 |
| Cost total | $0.018 | $0.097 |
| Preț de intrare | $0.040 / 1M | $0.150 / 1M |
| Preț de ieșire | $0.150 / 1M | $0.600 / 1M |
| Total tokenuri de intrare | 130,296 | 140,559 |
| Tokenuri de ieșire | 82,585 | 40,268 |
| Tokenuri de raționament | 0 | 93,329 |
| Timp de răspuns (mediu) | 3.51s | 10.80s |
| Timp de răspuns (maxim) | 60.70s | 59.15s |
| Timp de răspuns (total) | 77.28s | 237.60s |
| Parametri | ~100B | 119B în total (6B activi) |
| Disponibilitate | Închis | Sursă deschisă |
Prezentare generare modele
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#259 Mercury 2.5 Preview
none
SVG invalid
- Cost
- $0.001
- Timp
- 3.3s
- Tokenuri
- 3,122 tok
#246 Mistral Small 4
medium- Cost
- $0.006
- Timp
- 47.9s
- Tokenuri
- 9,857 tok
Top modele după scor
Scor vs cost total
Timp de răspuns (mediu)
Scor vs Timp de răspuns (mediu)
Total tokenuri de ieșire
Scor vs Total tokenuri de ieșire
Defalcare pe categorii
| Trucuri anti-AI | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.8 | 8.3 | 16.7% | 1 | 655ms | 812 | 256 | 0 | |
| Mistral Small 4 | 5.6 | 3.8 | 66.7% | 3 | 2.67s | 708 | 4,055 | 4,778 |
| Programare | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 4.7 | 7.9 | 22.2% | 1 | 459ms | 7,850 | 650 | 0 | |
| Mistral Small 4 | 4.4 | 5.1 | 33.3% | 2 | 39.98s | 7,636 | 11,635 | 54,715 |
| Combinat | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 31.28s | 101,129 | 80,273 | 0 | |
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 32.40s | 116,624 | 17,890 | 18,384 |
| Parsare și extragere de date | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.3 | 5.8 | 66.7% | 1 | 1.04s | 8,333 | 672 | 0 | |
| Mistral Small 4 | 7.3 | 5.9 | 83.3% | 1 | 1.23s | 6,171 | 335 | 723 |
| Specific domeniului | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.6 | 7.2 | 22.2% | 1 | 631ms | 875 | 40 | 0 | |
| Mistral Small 4 | 5.9 | 7.2 | 55.6% | 1 | 6.33s | 807 | 3,427 | 7,871 |
| Inteligență generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.0 | 10.0 | 0.0% | 0 | 482ms | 544 | 85 | 0 | |
| Mistral Small 4 | 4.8 | 10.0 | 0.0% | 0 | 2.05s | 519 | 821 | 828 |
| Respectarea instrucțiunilor | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.3 | 10.0 | 50.0% | 0 | 1.26s | 753 | 73 | 0 | |
| Mistral Small 4 | 7.3 | 5.8 | 83.3% | 1 | 1.38s | 729 | 540 | 1,031 |
| Rezolvare de puzzle-uri | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.6 | 7.4 | 44.4% | 1 | 684ms | 796 | 292 | 0 | |
| Mistral Small 4 | 3.4 | 9.7 | 0.0% | 0 | 2.17s | 735 | 1,226 | 2,632 |
| Apelare instrumente | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.29s | 8,969 | 229 | 0 | |
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 3.50s | 6,420 | 321 | 810 |
| Cultură generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 419ms | 235 | 15 | 0 | |
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 5.92s | 210 | 18 | 1,557 |
Comparație rapidă
Schimbă perechea de comparație
Granite 4.2 8BlowvsMistral Small 4mediumMistral Small 4mediumvsQwen3 Coder NextnoneMistral Small 4mediumvsMiMo-V2.5noneMistral Small 4mediumvsQwen3.5-9BnoneMistral Small 4mediumvsInklingnoneDots 3 Note PreviewnoneDisponibil gratuitvsMistral Small 4mediumNorth Mini CodenoneDisponibil gratuitvsMistral Small 4mediumMercury 2.5 PreviewnonevsLaguna S 2.1lowDisponibil gratuitMercury 2.5 PreviewnonevsNemotron 3.5 LightninglowDisponibil gratuitMercury 2.5 PreviewnonevsMiniMax M2.7mediumTrinity Large ThinkinghighvsMercury 2.5 PreviewnoneMercury 2.5 PreviewlowvsMistral Small 4medium