AI BENCHY
Advertise here
#119

Grok 4.20

X AI Toleo: 2026-03-31 Imepimwa tarehe: 2026-05-06 14:16 x-ai/grok-4.20::none
(medium) (none)

Muhtasari

Grok 4.20 hupata alama 5.4 kwenye AI BENCHY na iko nafasi ya #119. Ina reliability Haipo, pass rate 35.2%, gharama jumla $0.095, na wastani wa response time 1.11s.

Kinachofanya Grok 4.20 iwe ya kipekee: Inaonekana zaidi kwenye Mbinu za kupinga AI, ambako iko #3; huku Uandishi wa msimbo ikiwa eneo lake dhaifu zaidi kwenye #11. Ni ya haraka kwa kiasi kikubwa ikilinganishwa na modeli zinazofanana.

Kidokezo cha utambulisho

Grok 4.20 Beta ilikuwa toleo la awali la Grok 4.20.

Alama

5.4

Uthabiti

9.5

Uaminifu

Haipo

Jumla ya gharama (bei ya sasa)

$0.095

Jumla ya tokeni za matokeo

1,967

Jumla ya tokeni za ingizo

0

Bei ya ingizo

$1.250 / 1M

Bei ya toleo

$2.500 / 1M

Majaribio sahihi

Majaribio yenye makosa: 12

Kiwango cha kupita kwa kila jaribio: 35.2%

Majaribio yasiyo thabiti

1

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

1.11s

Muda wa majibu (upeo): 6.04s

Muda wa majibu (jumla): 20.02s

Jibu lisilo sahihi: 10 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1

Onyesho la kizazi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#119 xAI: Grok 4.20

none
Gharama
$0.004
Muda
6.5s
Tokeni
1,367 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-05-06 14:16 Jaribio tena 5.4 Haipo $0.057 ↓ Linganisha
2026-05-06 14:16 Jaribio tena 5.4 Haipo $0.095 Linganisha
2026-05-06 14:16 Jaribio tena 5.4 Haipo $0.095 Linganisha
2026-05-06 14:16 Suite imebadilika 5.4 Haipo $0.095 Uendeshaji wa sasa
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 5.2 Haipo $0.095 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-05-06 14:16 · Suite imebadilika5.49.5Haipo6/1811,9670$0.0951.11s
2026-05-06 14:16 · Jaribio tena5.410.0Haipo6/1801,92341,313$0.0571.11s
Tofauti0.0-0.50+1+44-41313+$0.038+4ms

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Grok 4.20nonevsQwen3.5-122B-A10BnoneGrok 4.20nonevsMiniMax M2.7mediumGrok 4.20nonevsGPT-5.4 MininoneGrok 4.20nonevsQwen3.6 35B A3BnoneGrok 4.20nonevsLaguna XS 2.1noneInapatikana bureGrok 4.20nonevsMistral Small 4noneGrok 4.20nonevsGemini 3.5 FlashhighGrok 4.20nonevsGemini 3 Flash PreviewmediumGrok 4.20nonevsNemotron 3 Ultra 550b A55bmediumInapatikana bureGrok 4.20nonevsGPT-5.5low

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 4.8 10.0
Uandishi wa msimbo 3.4 9.3
Mchanganyiko 3.0 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 3.0 10.0
Akili ya jumla 4.8 10.0
Ufuataji wa maagizo 6.3 10.0
Utatuzi wa mafumbo 5.3 7.2
Mwito wa zana 10.0 10.0

Modeli zilizolinganishwa