Urambazaji
AI BENCHY
Advertise here

Mercury 2 (medium) vs Grok 4.20 (medium)

average score iko karibu sawa: 7.0 vs 7.0. Mercury 2 (medium) ina gharama ya chini ya benchmark: $0.094 vs $0.805. Mercury 2 (medium) ni ya haraka zaidi: 2.95s vs 32.56s, na pass rates 53.0% vs 60.6%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-09-02

Nafasi
#131
Jumla ya tokeni za matokeo
87,554
Muda wa majibu (wastani)
2.95s
Jumla ya gharama
$0.094
Nafasi
#132
Jumla ya tokeni za matokeo
270,259
Muda wa majibu (wastani)
32.56s
Jumla ya gharama
$0.805
Muundo unaopendekezwa Mercury 2 (medium)

It has the best score here (7.0), while costing about 8.6x less than Grok 4.20 (medium).

Ulinganisho wa kina

Kipimo Mercury 2 Mercury 2 medium Toleo: 2026-02-24 Grok 4.20 Grok 4.20 medium Toleo: 2026-03-31
Alama 7.0 7.0
Nafasi #131 #132
Uaminifu 10.0 10.0
Uthabiti 8.4 8.2
Majaribio 66/66 66/66
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 53.0% 60.6%
Majaribio yasiyo thabiti 4 5
Jumla ya uendeshaji 66 66
Gharama kwa matokeo 0.933 10.365
Jumla ya gharama $0.094 $0.805
Bei ya ingizo $0.250 / 1M $1.250 / 1M
Bei ya toleo $0.750 / 1M $2.500 / 1M
Jumla ya tokeni za ingizo 110,515 102,986
Tokeni za matokeo 10,325 5,860
Tokeni za hoja 77,229 264,399
Muda wa majibu (wastani) 2.95s 32.56s
Muda wa majibu (upeo) 14.63s 199.66s
Muda wa majibu (jumla) 61.89s 716.36s
Vigezo ~100B ~1T jumla (~100B vinavyotumika)
Upatikanaji Imefungwa Imefungwa

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#131 Mercury 2

medium
Gharama
$0.002
Muda
2.1s
Tokeni
1,702 tok

#132 SpaceXAI: Grok 4.20

medium
Gharama
$0.041
Muda
110.3s
Tokeni
16,336 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
Grok 4.20 6.3 6.6 55.6% 1 109.93s 8,307 268 103,150

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho