Urambazaji
Advertise here

KAT Coder AIR V2.5 (low) vs GPT-4o-mini

average score iko karibu sawa: 5.0 vs 5.0. GPT-4o-mini ina gharama ya chini ya benchmark: $0.024 vs $0.046. GPT-4o-mini ni ya haraka zaidi: 4.16s vs 10.21s, na pass rates 42.0% vs 21.7%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-01

Modeli zilizolinganishwa

Nafasi
#301
Jumla ya tokeni za matokeo
60,414
Muda wa majibu (wastani)
10.21s
Jumla ya gharama
$0.046
Nafasi
#300
Jumla ya tokeni za matokeo
3,627
Muda wa majibu (wastani)
4.16s
Jumla ya gharama
$0.024
Muundo unaopendekezwa GPT-4o-mini

It has the best score here (5.0), while costing about 1.9x less than KAT Coder AIR V2.5 (low).

Ulinganisho wa kina

Kipimo KAT Coder AIR V2.5 KAT Coder AIR V2.5 low Toleo: 2026-07-14 GPT-4o-mini GPT-4o-mini none Toleo: 2024-07-18
Alama 5.0 5.0
Nafasi #301 #300
Uaminifu 9.9 10.0
Uthabiti 7.8 9.9
Majaribio 69/69 69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 42.0% 21.7%
Majaribio yasiyo thabiti 6 0
Jumla ya uendeshaji 69 69
Gharama kwa matokeo 0.649 0.480
Jumla ya gharama $0.046 $0.024
Bei ya ingizo $0.000 / 1M $0.150 / 1M
Bei ya toleo $0.000 / 1M $0.600 / 1M
Jumla ya tokeni za ingizo 61,094 145,180
Tokeni za matokeo 6,532 3,627
Tokeni za hoja 53,882 0
Muda wa majibu (wastani) 10.21s 4.16s
Muda wa majibu (upeo) 86.23s 39.99s
Muda wa majibu (jumla) 234.86s 70.70s
Vigezo ~35B jumla (~3B vinavyotumika) ~8B
Upatikanaji Imefungwa Imefungwa

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#301 KAT Coder AIR V2.5

low
Gharama
$0.004
Muda
29.9s
Tokeni
6,008 tok

#300 GPT-4o-mini

none
Gharama
$0.001
Muda
6.6s
Tokeni
742 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
KAT Coder AIR V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho