Urambazaji
Advertise here

KAT Coder AIR V2.5 (default) vs gpt-oss-120b

KAT Coder AIR V2.5 (default) inaongoza kwa average score: 4.4 vs 4.2. gpt-oss-120b ina gharama ya chini ya benchmark: $0.016 vs $0.070. KAT Coder AIR V2.5 (default) ni ya haraka zaidi: 11.96s vs 28.63s, na pass rates 34.8% vs 34.8%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-07

Modeli zilizolinganishwa

Nafasi
#348
Jumla ya tokeni za matokeo
97,752
Muda wa majibu (wastani)
11.96s
Jumla ya gharama
$0.070
Nafasi
#356
Jumla ya tokeni za matokeo
62,213
Muda wa majibu (wastani)
28.63s
Jumla ya gharama
$0.016
Muundo unaopendekezwa KAT Coder AIR V2.5 (default)

It has the best score here (4.4), while responding about 2.4x faster than gpt-oss-120b.

Ulinganisho wa kina

Kipimo KAT Coder AIR V2.5 KAT Coder AIR V2.5 default Toleo: 2026-07-14 gpt-oss-120b gpt-oss-120b none Toleo: 2025-08-05
Alama 4.4 4.2
Nafasi #348 #356
Uaminifu 10.0 10.0
Uthabiti 7.4 7.6
Majaribio 69/69 60/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 34.8% 34.8%
Majaribio yasiyo thabiti 7 3
Jumla ya uendeshaji 69 60
Gharama kwa matokeo 1.382 0.274
Jumla ya gharama $0.070 $0.016
Bei ya ingizo $0.150 / 1M $0.037 / 1M
Bei ya toleo $0.600 / 1M $0.170 / 1M
Bei ya kusoma akiba Haipo Haipo
Bei ya kuandika akiba Haipo Haipo
Jumla ya tokeni za ingizo 69,376 131,652
Tokeni za matokeo 7,792 16,869
Tokeni za hoja 89,960 53,081
Muda wa majibu (wastani) 11.96s 28.63s
Muda wa majibu (upeo) 121.05s 140.90s
Muda wa majibu (jumla) 275.18s 486.69s
Vigezo ~35B jumla (~3B vinavyotumika) 117B jumla (5.1B vinavyotumika)
Upatikanaji Imefungwa Chanzo huria

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#348 KAT Coder AIR V2.5

default
Gharama
$0.002
Muda
14.5s
Tokeni
2,619 tok

#356 gpt-oss-120b

none
Hakuna matokeo ya onyesho yaliyozalishwa kwa modeli hii bado.
Gharama
Haipo
Muda
-
Tokeni
0 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
KAT Coder AIR V2.5 3.3 9.6 0.0% 0 14.31s 6,472 2,032 14,886
gpt-oss-120b 1.5 0.4 22.2% 1 9.57s 901 204 3,028

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho