AI BENCHY
Advertise here
#107

Grok 4.20 Beta

X AI Toleo: 2026-03-12 Imepimwa tarehe: 2026-05-06 14:15 x-ai/grok-4.20-beta::none
(medium) (none)

Muhtasari

Grok 4.20 Beta hupata alama 5.8 kwenye AI BENCHY na iko nafasi ya #107. Ina reliability Haipo, pass rate 37.0%, gharama jumla $0.087, na wastani wa response time 1.19s.

Kinachofanya Grok 4.20 Beta iwe ya kipekee: Inaonekana zaidi kwenye Utatuzi wa mafumbo, ambako iko #1; huku Ufuataji wa maagizo ikiwa eneo lake dhaifu zaidi kwenye #10. Ni ya haraka kwa kiasi kikubwa ikilinganishwa na modeli zinazofanana.

Modeli iliyohifadhiwa: modeli hii haitasasishwa tena wala kujaribiwa kwenye majaribio mapya.

Kidokezo cha utambulisho

Grok 4.20 Beta ilikuwa toleo la awali la xAI: Grok 4.20.

Alama

5.8

Uthabiti

9.6

Uaminifu

Haipo

Jumla ya gharama (bei ya sasa)

$0.087 ↓ -4.8%

Ilijaribiwa kwa: $0.091

Jumla ya tokeni za matokeo

1,657

Jumla ya tokeni za ingizo

40,597

Bei ya ingizo

$2.041 / 1M

Bei ya toleo

$2.041 / 1M

Majaribio sahihi

Majaribio yenye makosa: 12

Kiwango cha kupita kwa kila jaribio: 37.0%

Majaribio yasiyo thabiti

1

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

1.19s

Muda wa majibu (upeo): 6.48s

Muda wa majibu (jumla): 21.43s

Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 Grok 4.20 Beta

none
Invalid SVG
Cost
$0.004
Time
8.5s
Tokens
1,672 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-05-06 14:15 Jaribio tena 5.8 Haipo $0.087 ↓ Uendeshaji wa sasa
2026-05-06 14:15 Jaribio tena 5.5 Haipo $0.091 Linganisha
2026-05-06 14:15 Jaribio tena 5.5 Haipo $0.091 Linganisha
2026-05-06 14:15 Suite imebadilika 5.5 Haipo $0.091 Linganisha
2026-04-11 01:19 Jaribio la kwanza lililorekodiwa 5.3 Haipo $0.091 Linganisha

Ulinganisho wa uendeshaji

UendeshajiAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-05-06 14:15 · Uendeshaji wa sasa5.89.6Haipo6/1811,65740,597$0.0871.19s
2026-05-06 14:15 · Jaribio tena5.59.2Haipo5/1821,5910$0.0911.19s
Tofauti+0.3+0.4+1-1+66+40597-$0.004+3ms

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-06-04 15:40 $2.041 / 1M $2.041 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Grok 4.20 BetanonevsGemini 3 Flash PreviewmediumGrok 4.20 BetanonevsGemini 3.5 FlashhighGrok 4.20 BetanonevsNemotron 3 Ultra 550b A55bmediumInapatikana bureGrok 4.20 BetanonevsGemini 3.5 Flashlow

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 4.0 8.4
Uandishi wa msimbo 5.5 10.0
Mchanganyiko 3.0 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 3.0 10.0
Akili ya jumla 5.0 10.0
Ufuataji wa maagizo 6.3 10.0
Utatuzi wa mafumbo 7.7 10.0
Mwito wa zana 10.0 10.0

Modeli zilizolinganishwa