Navigare
AI BENCHY
Your ad here

AI BENCHY Compare

IBM: Granite 4.1 8B vs Mistral: Mistral Small 4

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-05-01

Metrică Granite 4.1 8B Granite 4.1 8B none Lansare: 2026-05-01 Mistral Small 4 Mistral Small 4 medium Lansare: 2026-03-16
Scor 4.3 5.7
Rang #135 #99
Fiabilitate 10.0 N/D
Consistență 10.0 6.8
Teste corecte
Rată de trecere pe încercare 11.1% 50.0%
Teste instabile 0 7
Rulări totale 54 54
Cost per rezultat 0.110 0.674
Cost total $0.003 $0.034
Preț de intrare $0.050 / 1M $0.150 / 1M
Preț de ieșire $0.100 / 1M $0.600 / 1M
Tokenuri de ieșire 2,712 15,084
Tokenuri de raționament 0 39,408
Timp de răspuns (mediu) 767ms 5.64s
Timp de răspuns (maxim) 2.17s 30.49s
Timp de răspuns (total) 13.81s 101.52s

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 903 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 6.9 10.0 0.0% 0 1.07s 339 0
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 396 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 195 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 24 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 115 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 66 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.7 10.0 0.0% 0 635ms 431 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 243 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

Comparație rapidă

Schimbă perechea de comparație

Mistral Small 4mediumvsGLM 4.7 FlashnoneGranite 4.1 8BnonevsQwen3.5-9BmediumMistral Small 4mediumvsKimi K2.5noneMistral Small 4mediumvsGLM 5.1noneMistral Small 4mediumvsQwen3.6 FlashnoneMistral Small 4mediumvsGLM 5 TurbononeMistral Small 4mediumvsMiMo-V2.5-PrononeMistral Small 4mediumvsQwen3.5 Plus 2026-04-20noneMistral Small 4mediumvsKimi K2.6noneMistral Small 4mediumvsGPT-5.4noneMistral Small 4mediumvsQwen3.5-122B-A10BnoneMistral Small 4mediumvsGrok 4.20none