Urambazaji
Advertise here

KAT-Coder-Pro V2.5 (medium) vs Inkling 2 Mini (medium)

average score iko karibu sawa: 6.2 vs 6.2. Inkling 2 Mini (medium) ina gharama ya chini ya benchmark: $0.385 vs $0.669. KAT-Coder-Pro V2.5 (medium) ni ya haraka zaidi: 23.94s vs 54.86s, na pass rates 62.3% vs 62.3%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-11-22

Modeli zilizolinganishwa

Nafasi
#335
Jumla ya tokeni za matokeo
139,375
Muda wa majibu (wastani)
23.94s
Jumla ya gharama
$0.669
Nafasi
#333
Jumla ya tokeni za matokeo
847,969
Muda wa majibu (wastani)
54.86s
Jumla ya gharama
$0.385
Muundo unaopendekezwa Inkling 2 Mini (medium)

It has the best score here (6.2), while costing about 1.7x less than KAT-Coder-Pro V2.5 (medium).

Ulinganisho wa kina

Kipimo KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Toleo: 2026-07-14 Inkling 2 Mini Inkling 2 Mini medium Toleo: 2026-11-20
Alama 6.2 6.2
Nafasi #335 #333
Uaminifu 10.0 10.0
Uthabiti 7.2 8.3
Majaribio 69/69 69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 62.3% 62.3%
Majaribio yasiyo thabiti 8 5
Jumla ya uendeshaji 69 69
Gharama kwa matokeo 4.342 3.206
Jumla ya gharama $0.669 $0.385
Bei ya ingizo $0.740 / 1M $0.100 / 1M
Bei ya toleo $2.960 / 1M $0.400 / 1M
Bei ya kusoma akiba $0.150 / 1M $0.020 / 1M
Bei ya kuandika akiba Haipo Haipo
Jumla ya tokeni za ingizo 87,916 455,218
Tokeni za matokeo 7,213 18,927
Tokeni za hoja 132,162 829,042
Muda wa majibu (wastani) 23.94s 54.86s
Muda wa majibu (upeo) 257.00s 272.86s
Muda wa majibu (jumla) 550.52s 1261.74s
Vigezo ~700B jumla (~72B vinavyotumika) 26.4B jumla (3.4B vinavyotumika)
Upatikanaji Imefungwa Chanzo huria

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#335 KAT-Coder-Pro V2.5

medium
Gharama
$0.009
Muda
25.6s
Tokeni
2,939 tok

#333 Thinking Machines: Inkling 2 Mini

medium
Gharama
$0.002
Muda
25.4s
Tokeni
3,575 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Inkling 2 Mini 5.8 4.4 66.7% 2 130.51s 8,814 562 264,091

Badilisha jozi ya ulinganisho