Navigare
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs OpenAI: GPT-4o-mini

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-05-01

Metrică Mistral Small 4 Mistral Small 4 medium Lansare: 2026-03-16 GPT-4o-mini GPT-4o-mini none Lansare: 2024-07-18
Scor 5.7 5.1
Rang #99 #120
Fiabilitate N/D N/D
Consistență 6.8 9.9
Teste corecte
Rată de trecere pe încercare 50.0% 27.8%
Teste instabile 7 0
Rulări totale 54 54
Cost per rezultat 0.674 0.098
Cost total $0.034 $0.005
Preț de intrare $0.150 / 1M $0.150 / 1M
Preț de ieșire $0.600 / 1M $0.600 / 1M
Tokenuri de ieșire 15,084 1,947
Tokenuri de raționament 39,408 0
Timp de răspuns (mediu) 5.64s 2.00s
Timp de răspuns (maxim) 30.49s 7.58s
Timp de răspuns (total) 101.52s 21.99s

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
GPT-4o-mini 4.8 10.0 25.0% 0 1.34s 186 0
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
GPT-4o-mini 3.0 8.7 0.0% 0 2.55s 347 0
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
GPT-4o-mini 3.0 10.0 0.0% 0 7.58s 568 0
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
GPT-4o-mini 10.0 10.0 100.0% 0 1.27s 183 0
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
GPT-4o-mini 3.0 10.0 0.0% 0 637ms 15 0
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
GPT-4o-mini 4.0 10.0 0.0% 0 909ms 66 0
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
GPT-4o-mini 6.3 10.0 50.0% 0 1.27s 69 0
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
GPT-4o-mini 3.7 10.0 0.0% 0 1.30s 308 0
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
GPT-4o-mini 10.0 10.0 100.0% 0 2.51s 205 0

Comparație rapidă

Schimbă perechea de comparație