AI BENCHY
Advertise here

#68

Grok 4.20

X AI Toleo: 2026-03-31 Imepimwa tarehe: 2026-05-08 15:32 x-ai/grok-4.20::medium
(medium) (none)

Kidokezo cha utambulisho

Grok 4.20 Beta ilikuwa toleo la awali la Grok 4.20.

Alama

6.9

Uthabiti

8.3

Uaminifu

10.0

Jumla ya gharama

$0.756

Jumla ya tokeni za matokeo

130,017

Bei ya ingizo

$1.250 / 1M

Bei ya toleo

$2.500 / 1M

Majaribio sahihi

Majaribio yenye makosa: 9

Kiwango cha kupita kwa kila jaribio: 63.2%

Majaribio yasiyo thabiti

4

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

14.53s

Muda wa majibu (upeo): 63.48s

Muda wa majibu (jumla): 276.06s

Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Hakuna jibu: 1

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-05-08 15:32 Suite imebadilika 6.9 10.0 $0.756 Uendeshaji wa sasa
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 7.0 Haipo $0.743 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya gharamaMuda wa majibu (wastani)
2026-05-08 15:32 · Uendeshaji wa sasa6.98.310.010/194130,017$0.75614.53s
2026-04-11 01:44 · Jaribio la kwanza lililorekodiwa7.07.8Haipo9/185111,626$0.74310.33s
Tofauti-0.1+0.5+1-1+18391+$0.014+4203ms

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Grok 4.20mediumvsRing 2.6 1tnoneInapatikana bureGrok 4.20mediumvsQwen3.5-35B-A3BmediumGrok 4.20mediumvsMiMo-V2-FlashmediumGrok 4.20mediumvsGPT-5.2mediumGrok 4.20mediumvsRing 2.6 1tmediumInapatikana bureGrok 4.20mediumvsDeepSeek V3.2mediumGrok 4.20mediumvsGemini 3 Flash PreviewmediumGrok 4.20mediumvsGemini 3.1 Pro Previewmedium

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 8.2 7.9
Uandishi wa msimbo 4.3 1.1
Mchanganyiko 10.0 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 5.3 10.0
Akili ya jumla 3.9 2.6
Ufuataji wa maagizo 7.3 6.0
Utatuzi wa mafumbo 7.7 10.0
Mwito wa zana 3.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa