Advertise here
#79

Mistral Small 4

Mistral Releasedatum: 2026-03-16 Getest op: 2026-04-11 01:44 mistralai/mistral-small-2603::medium
119B totaal (6B actief)MoEOpen-source
(medium) (none)

Samenvatting

Mistral Small 4 scoort 5.7 op AI BENCHY en staat op #79. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 50.0%, $0.034 totale kosten en 5.64s gemiddelde responstijd.

Wat Mistral Small 4 uniek maakt: De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het is opvallend snel vergeleken met vergelijkbare modellen.

Modelgegevens

Onderzocht op 2026-08-12

Gerapporteerd
Parameters
119B totaal (6B actief)
Architectuur
MoE
Beschikbaarheid
Open-source
Licentie
Apache-2.0

Score

5.7

Consistentie

6.8

Betrouwbaarheid

n.v.t.

Totaal aantal uitvoer-tokens

54,492

Totaal aantal invoer-tokens

0

Invoerprijs

$0.150 / 1M

Uitvoerprijs

$0.600 / 1M

Correcte tests

Foute tests: 13

Slaagpercentage per poging: 50.0%

Instabiele tests

7

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

5.64s

Responstijd (max): 30.49s

Responstijd (totaal): 101.52s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#79 Mistral Small 4

medium
Kosten
$0.006
Tijd
47.9s
Tokens
9,857 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 02:05 Hertest 5.1 10.0 $0.097 Vergelijken
2026-07-16 22:23 Nieuwe test toegevoegd 5.1 10.0 $0.096 Vergelijken
2026-06-04 13:43 Nieuwe test toegevoegd 5.3 10.0 $0.068 Vergelijken
2026-05-22 00:16 Suite gewijzigd 5.4 10.0 $0.056 Vergelijken
2026-04-11 01:44 Eerste geregistreerde run 5.7 n.v.t. $0.034 Huidige run

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-04-11 01:44 · Eerste geregistreerde run54/54 pogingen5.76.8n.v.t.5/18754,4920$0.0345.64s
2026-06-04 13:43 · Nieuwe test toegevoegd63/63 pogingen5.36.910.05/218108,86242,576$0.0689.40s
Verschil+0.4-0.10-1-54370-42576-$0.034-3760ms

De benchmarkdekking verschilt: 54/54 pogingen (Doel: 3 herhalingen per test) tegenover 63/63 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 5.6 3.8
Programmeren 6.7 3.5
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 7.3 5.9
Domeinspecifiek 5.3 7.2
Algemene intelligentie 4.8 10.0
Instructies opvolgen 7.3 5.8
Puzzeloplossing 3.4 9.7
Toolaanroepen 10.0 10.0

Vergeleken modellen