AI BENCHY
Advertise here
#95

MiMo-V2.5

Xiaomi Releasedatum: 2026-04-22 Getest op: 2026-04-22 21:39 xiaomi/mimo-v2.5::none
310B totaal (15B actief)MoEOpen-source
(medium) (none)

Samenvatting

MiMo-V2.5 scoort 5.1 op AI BENCHY en staat op #95. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 27.8%, $0.019 totale kosten en 1.05s gemiddelde responstijd.

Wat MiMo-V2.5 uniek maakt: Het valt het meest op in Programmeren, waar het #1 staat, terwijl Anti-AI-trucs het zwakste gebied is met #17. De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het is opvallend snel vergeleken met vergelijkbare modellen.

Modelgegevens

Onderzocht op 2026-08-12

Gerapporteerd
Parameters
310B totaal (15B actief)
Architectuur
MoE
Beschikbaarheid
Open-source
Licentie
MIT

Score

5.1

Consistentie

10.0

Betrouwbaarheid

n.v.t.

Totaal aantal uitvoer-tokens

2,177

Totaal aantal invoer-tokens

0

Invoerprijs

$0.400 / 1M

Uitvoerprijs

$2.000 / 1M

Correcte tests

Foute tests: 13

Slaagpercentage per poging: 27.8%

Instabiele tests

0

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

1.05s

Responstijd (max): 2.43s

Responstijd (totaal): 18.94s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#95 MiMo-V2.5

none
Kosten
$0.007
Tijd
267.4s
Tokens
25,283 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 02:25 Hertest 5.1 10.0 $0.025 Vergelijken
2026-07-16 22:42 Nieuwe test toegevoegd 5.1 10.0 $0.025 Vergelijken
2026-06-04 13:48 Nieuwe test toegevoegd 4.9 10.0 $0.007 Vergelijken
2026-05-22 12:51 Nieuwe test toegevoegd 4.8 10.0 $0.021 Vergelijken
2026-05-08 15:33 Suite gewijzigd 4.9 10.0 $0.019 Vergelijken
2026-04-22 21:39 Eerste geregistreerde run 5.1 n.v.t. $0.019 Huidige run

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-04-22 21:39 · Eerste geregistreerde run54/54 pogingen5.110.0n.v.t.5/1802,1770$0.0191.05s
2026-05-22 12:51 · Nieuwe test toegevoegd60/60 pogingen4.89.310.04/2022,2580$0.0212.20s
Verschil+0.3+0.7+1-2-810-$0.002-1146ms

De benchmarkdekking verschilt: 54/54 pogingen (Doel: 3 herhalingen per test) tegenover 60/60 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 4.8 10.0
Programmeren 10.0 10.0
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 6.5 10.0
Domeinspecifiek 3.0 10.0
Algemene intelligentie 4.6 10.0
Instructies opvolgen 6.5 10.0
Puzzeloplossing 3.4 10.0
Toolaanroepen 10.0 10.0

Vergeleken modellen