AI BENCHY
Advertise here
#121

Mistral Small 4

Mistral Lansare: 2026-03-16 Testat la: 2026-05-22 00:16 mistralai/mistral-small-2603::medium
(medium) (none)

Rezumat

Mistral Small 4 obține 5.4 pe AI BENCHY și este pe #121. Are fiabilitate 10.0, rată de reușită 45.0%, cost total $0.056 și timp mediu de răspuns 8.33s.

Ce face Mistral Small 4 unic: Se remarcă cel mai mult la Trucuri anti-AI, unde este pe #2, iar Parsare și extragere de date este zona cea mai slabă, la #9. Folosește neobișnuit de multe tokenuri de raționament, ceea ce poate explica rulări mai lente sau mai scumpe.

Scor

5.4

Consistență

7.1

Total tokenuri de ieșire

89,683

Total tokenuri de intrare

0

Preț de intrare

$0.150 / 1M

Preț de ieșire

$0.600 / 1M

Teste corecte

Teste greșite: 15

Rată de trecere pe încercare: 45.0%

Teste instabile

7

Testele instabile au avut rezultate mixte între rulări (cel puțin un succes și un eșec).

Timp de răspuns (mediu)

8.33s

Timp de răspuns (maxim): 59.15s

Timp de răspuns (total): 166.59s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#121 Mistral Small 4

medium
Cost
$0.006
Time
47.9s
Tokens
9,857 tok

Istoric rulări

Testat la Scor Fiabilitate Teste corecte Cost total Compară
2026-06-04 13:43 Test nou adăugat 5.3 10.0 $0.068 Compară
2026-05-22 00:16 Suită modificată 5.4 10.0 $0.056 Rularea curentă
2026-04-11 01:44 Prima rulare înregistrată 5.7 N/D $0.034 Compară

Această rulare a folosit o suită de benchmark diferită. Ține cont de schimbările suitei când interpretezi evoluția istorică.

Grafice

Alege primul model, apoi fă clic pe al doilea model pentru a deschide o pagină alăturată.

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Comparație rapidă

Defalcare pe categorii

Categorie Scor Consistență Teste corecte
Trucuri anti-AI 5.6 3.8
Programare 5.1 6.8
Combinat 3.0 10.0
Parsare și extragere de date 7.3 5.9
Specific domeniului 5.3 7.2
Inteligență generală 4.8 10.0
Respectarea instrucțiunilor 7.3 5.8
Rezolvare de puzzle-uri 3.4 9.7
Apelare instrumente 10.0 10.0
Cultură generală 3.0 10.0

Modele comparate