AI BENCHY
Advertise here
#135

Granite 4.1 8B

IBM Granite Lansare: 2026-05-01 Testat la: 2026-05-01 00:31 ibm-granite/granite-4.1-8b::none

Rezumat

Granite 4.1 8B obține 4.3 pe AI BENCHY și este pe #135. Are fiabilitate 10.0, rată de reușită 11.1%, cost total $0.003 și timp mediu de răspuns 767ms.

Ce face Granite 4.1 8B unic: Se remarcă cel mai mult la Programare, unde este pe #1, iar Parsare și extragere de date este zona cea mai slabă, la #15. Costul total al benchmarkului este neobișnuit de mic pentru acest nivel de scor. Este vizibil rapid față de modele similare.

Scor

4.3

Consistență

10.0

Fiabilitate

10.0

Cost total (preț curent)

$0.003

Total tokenuri de ieșire

2,712

Total tokenuri de intrare

0

Preț de intrare

$0.050 / 1M

Preț de ieșire

$0.100 / 1M

Teste corecte

Teste greșite: 16

Rată de trecere pe încercare: 11.1%

Teste instabile

0

Testele instabile au avut rezultate mixte între rulări (cel puțin un succes și un eșec).

Timp de răspuns (mediu)

767ms

Timp de răspuns (maxim): 2.17s

Timp de răspuns (total): 13.81s

Răspuns greșit: 11 Nu a urmat instrucțiunile: 4 Apel de instrument invalid: 1

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

Istoric rulări

Testat la Scor Fiabilitate Teste corecte Cost total Compară
2026-06-04 14:07 Test nou adăugat 4.0 10.0 $0.003 Compară
2026-05-22 00:30 Suită modificată 4.1 10.0 $0.003 Compară
2026-05-01 00:31 Prima rulare 4.3 10.0 $0.003 Rularea curentă

Grafice

Alege primul model, apoi fă clic pe al doilea model pentru a deschide o pagină alăturată.

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Comparație rapidă

Granite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsQwen3.5-122B-A10BnoneGranite 4.1 8BnonevsDeepSeek V3.2noneGranite 4.1 8BnonevsGLM 5 TurbononeGranite 4.1 8BnonevsMiniMax M2.7mediumGranite 4.1 8BnonevsGemini 3.5 FlashhighGranite 4.1 8BnonevsGemini 3 Flash PreviewmediumGranite 4.1 8BnonevsNemotron 3 Ultra 550b A55bmediumDisponibil gratuitGranite 4.1 8BnonevsGPT-5.5low

Defalcare pe categorii

Categorie Scor Consistență Teste corecte
Trucuri anti-AI 4.9 10.0
Programare 6.9 10.0
Combinat 3.0 10.0
Parsare și extragere de date 3.0 10.0
Specific domeniului 3.0 10.0
Inteligență generală 4.0 10.0
Respectarea instrucțiunilor 3.6 9.9
Rezolvare de puzzle-uri 3.7 10.0
Apelare instrumente 10.0 10.0

Modele comparate