Navigare
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs StepFun: Step 3.5 Flash

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-04-11

Metrică Mistral Small 4 Mistral Small 4 medium Lansare: 2026-03-16 Step 3.5 Flash Step 3.5 Flash none Lansare: 2026-02-01
Scor 5.7 3.0
Rang #69 #93
Consistență 6.8 10.0
Teste corecte
Rată de trecere pe încercare 50.0% 0.0%
Teste instabile 7 0
Rulări totale 54 3
Cost per rezultat 0.674 0.000
Cost total $0.034 $0.000
Preț de intrare $0.150 / 1M $0.100 / 1M
Preț de ieșire $0.600 / 1M $0.300 / 1M
Tokenuri de ieșire 15,084 0
Tokenuri de raționament 39,408 0
Timp de răspuns (mediu) 5.64s 0ms
Timp de răspuns (maxim) 30.49s 0ms
Timp de răspuns (total) 101.52s 0ms

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Step 3.5 Flash - - - - - - - -
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Step 3.5 Flash - - - - - - - -
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Step 3.5 Flash - - - - - - - -
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Step 3.5 Flash - - - - - - - -
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Step 3.5 Flash - - - - - - - -
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Step 3.5 Flash - - - - - - - -
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Step 3.5 Flash - - - - - - - -
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
Step 3.5 Flash - - - - - - - -

Comparație rapidă

Schimbă perechea de comparație