#121 Mistral Small 4
medium- Cost
- $0.006
- Time
- 47.9s
- Tokens
- 9,857 tok
Samenvatting
Mistral Small 4 scoort 5.4 op AI BENCHY en staat op #121. Het model heeft 10.0 betrouwbaarheid, een slagingspercentage van 45.0%, $0.056 totale kosten en 8.33s gemiddelde responstijd.
Wat Mistral Small 4 uniek maakt: Het valt het meest op in Anti-AI-trucs, waar het #2 staat, terwijl Gegevensparsering en extractie het zwakste gebied is met #9. Het gebruikt ongewoon veel redeneertokens, wat tragere of duurdere runs kan verklaren.
5.4
Consistentie
7.1
10.0
Totaal aantal uitvoer-tokens
89,683
Totaal aantal invoer-tokens
0
Invoerprijs
$0.150 / 1M
Uitvoerprijs
$0.600 / 1M
Instabiele tests
7
Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).
Generation showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Rungeschiedenis
| Getest op | Score | Betrouwbaarheid | Correcte tests | Totale kosten | Vergelijken |
|---|---|---|---|---|---|
| 2026-06-04 13:43 Nieuwe test toegevoegd | 5.3 | 10.0 | $0.068 | Vergelijken | |
| 2026-05-22 00:16 Suite gewijzigd | 5.4 | 10.0 | $0.056 | Huidige run | |
| 2026-04-11 01:44 Eerste geregistreerde run | 5.7 | n.v.t. | $0.034 | Vergelijken |
Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.
Runvergelijking
| Run | Score | Consistentie | Betrouwbaarheid | Correcte tests | Instabiele tests | Totaal aantal uitvoer-tokens | Totaal aantal invoer-tokens | Totale kosten | Responstijd (gem.) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · Suite gewijzigd | 5.4 | 7.1 | 10.0 | 5/20 | 7 | 89,683 | 0 | $0.056 | 8.33s |
| 2026-04-11 01:44 · Eerste geregistreerde run | 5.7 | 6.8 | n.v.t. | 5/18 | 7 | 54,492 | 0 | $0.034 | 5.64s |
| Verschil | -0.3 | +0.3 | 0 | 0 | +35191 | 0 | +$0.022 | +2689ms |
Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.
Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.
| Categorie | Score | Consistentie | Correcte tests |
|---|---|---|---|
| Anti-AI-trucs | 5.6 | 3.8 | |
| Programmeren | 5.1 | 6.8 | |
| Gecombineerd | 3.0 | 10.0 | |
| Gegevensparsering en extractie | 7.3 | 5.9 | |
| Domeinspecifiek | 5.3 | 7.2 | |
| Algemene intelligentie | 4.8 | 10.0 | |
| Instructies opvolgen | 7.3 | 5.8 | |
| Puzzeloplossing | 3.4 | 9.7 | |
| Toolaanroepen | 10.0 | 10.0 | |
| Algemene kennis | 3.0 | 10.0 |