AI BENCHY
Advertise here
#24

Gemma 4 31B

Google Lansare: 2026-04-02 Testat la: 2026-05-22 00:35 google/gemma-4-31b-it::medium
(medium) (none)

Rezumat

Gemma 4 31B obține 8.0 pe AI BENCHY și este pe #24. Are fiabilitate 6.7, rată de reușită 75.0%, cost total $0.029 și timp mediu de răspuns 35.51s.

Ce face Gemma 4 31B unic: Se remarcă cel mai mult la Trucuri anti-AI, unde este pe #1, iar Programare este zona cea mai slabă, la #17. Costul total al benchmarkului este neobișnuit de mic pentru acest nivel de scor.

Scor

8.0

Consistență

9.2

Total tokenuri de ieșire

69,291

Total tokenuri de intrare

0

Preț de intrare

$0.120 / 1M

Preț de ieșire

$0.370 / 1M

Teste corecte

Teste greșite: 6

Rată de trecere pe încercare: 75.0%

Teste instabile

2

Testele instabile au avut rezultate mixte între rulări (cel puțin un succes și un eșec).

Timp de răspuns (mediu)

35.51s

Timp de răspuns (maxim): 150.90s

Timp de răspuns (total): 639.17s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#24 Gemma 4 31B

medium
Cost
$0.002
Timp
45.7s
Tokenuri
2,696 tok

Istoric rulări

Testat la Scor Fiabilitate Teste corecte Cost total Compară
2026-06-04 14:27 Test nou adăugat 7.9 8.9 $0.035 Compară
2026-05-22 00:35 Suită modificată 8.0 6.7 $0.029 Rularea curentă
2026-04-14 00:56 Prima rulare înregistrată 8.3 N/D $0.018 Compară

Această rulare a folosit o suită de benchmark diferită. Ține cont de schimbările suitei când interpretezi evoluția istorică.

Grafice

Alege primul model, apoi fă clic pe al doilea model pentru a deschide o pagină alăturată.

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Comparație rapidă

Defalcare pe categorii

Categorie Scor Consistență Teste corecte
Trucuri anti-AI 10.0 10.0
Programare 3.8 1.6
Combinat 3.0 10.0
Parsare și extragere de date 10.0 10.0
Specific domeniului 7.7 10.0
Inteligență generală 10.0 10.0
Respectarea instrucțiunilor 10.0 10.0
Rezolvare de puzzle-uri 9.9 10.0
Apelare instrumente 3.0 10.0
Cultură generală 3.0 10.0

Modele comparate