AI BENCHY
Advertise here
#116

Grok 4.20 Beta

X AI Lansare: 2026-03-12 Testat la: 2026-05-06 14:15 x-ai/grok-4.20-beta::none
(medium) (none)

Rezumat

Grok 4.20 Beta obține 5.5 pe AI BENCHY și este pe #116. Are fiabilitate N/D, rată de reușită 35.2%, cost total $0.091 și timp mediu de răspuns 1.19s.

Ce face Grok 4.20 Beta unic: Este vizibil rapid față de modele similare.

Model arhivat: acest model nu mai este actualizat și nu mai este testat pe teste noi.

Notă de identitate

Grok 4.20 Beta a fost versiunea preview a lui xAI: Grok 4.20.

Scor

5.5

Consistență

9.2

Fiabilitate

N/D

Total tokenuri de ieșire

1,591

Total tokenuri de intrare

0

Preț de intrare

$0.000 / 1M

Preț de ieșire

$0.000 / 1M

Teste corecte

Teste greșite: 13

Rată de trecere pe încercare: 35.2%

Teste instabile

2

Testele instabile au avut rezultate mixte între rulări (cel puțin un succes și un eșec).

Timp de răspuns (mediu)

1.19s

Timp de răspuns (maxim): 6.48s

Timp de răspuns (total): 21.37s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#116 Grok 4.20 Beta

none
Invalid SVG
Cost
$0.004
Time
8.5s
Tokens
1,672 tok

Istoric rulări

Testat la Scor Fiabilitate Teste corecte Cost total Compară
2026-05-06 14:15 Retestare 5.8 N/D $0.087 Compară
2026-05-06 14:15 Retestare 5.5 N/D $0.091 Compară
2026-05-06 14:15 Retestare 5.5 N/D $0.091 Compară
2026-05-06 14:15 Suită modificată 5.5 N/D $0.091 Rularea curentă
2026-04-11 01:19 Prima rulare înregistrată 5.3 N/D $0.091 Compară

Această rulare a folosit o suită de benchmark diferită. Ține cont de schimbările suitei când interpretezi evoluția istorică.

Comparație între rulări

RulareScorConsistențăFiabilitateTeste corecteTeste instabileTotal tokenuri de ieșireTotal tokenuri de intrareCost totalTimp de răspuns (mediu)
2026-05-06 14:15 · Suită modificată5.59.2N/D5/1821,5910$0.0911.19s
2026-05-06 14:15 · Retestare5.59.2N/D5/1821,5910$0.0911.19s
Diferență0.00.00000$0.0000ms

Grafice

Alege primul model, apoi fă clic pe al doilea model pentru a deschide o pagină alăturată.

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Comparație rapidă

Defalcare pe categorii

Categorie Scor Consistență Teste corecte
Trucuri anti-AI 4.0 8.4
Programare 5.5 10.0
Combinat 3.0 10.0
Parsare și extragere de date 10.0 10.0
Specific domeniului 3.0 10.0
Inteligență generală 5.0 10.0
Respectarea instrucțiunilor 6.3 10.0
Rezolvare de puzzle-uri 5.9 7.2
Apelare instrumente 10.0 10.0

Modele comparate