#141

KAT-Coder-Air V2.5

Kwaipilot Toleo: 2026-07-14 Imepimwa tarehe: 2026-07-16 23:34 kwaipilot/kat-coder-air-v2.5::medium

~35B jumla (~3B vinavyotumika)MoEImefungwaMakadirio

(high) (medium) (low) (none)

Muhtasari

KAT-Coder-Air V2.5 hupata alama 5.6 kwenye AI BENCHY na iko nafasi ya #141. Ina reliability 9.9, pass rate 45.5%, gharama jumla $0.048, na wastani wa response time 8.42s.

Kinachofanya KAT-Coder-Air V2.5 iwe ya kipekee: Inaonekana zaidi kwenye Ufuataji wa maagizo, ambako iko #1; huku Uandishi wa msimbo ikiwa eneo lake dhaifu zaidi kwenye #15.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio

Vigezo: ~35B jumla (~3B vinavyotumika)
Muundo: MoE
Upatikanaji: Imefungwa
Leseni: -

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo Chanzo cha upatikanaji

Alama

5.6

Uthabiti

8.9

Uaminifu

9.9

Jumla ya gharama (bei ya sasa)

$0.048

Jumla ya tokeni za matokeo

66,174

Jumla ya tokeni za ingizo

51,472

Bei ya ingizo

$0.150 / 1M

Bei ya toleo

$0.600 / 1M

Majaribio sahihi

Majaribio yenye makosa: 14

Kiwango cha kupita kwa kila jaribio: 45.5%

Majaribio yasiyo thabiti

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

8.42s

Muda wa majibu (upeo): 48.19s

Muda wa majibu (jumla): 185.24s

Jibu lisilo sahihi: 11 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#141 KAT-Coder-Air V2.5

medium

Gharama: $0.003
Muda: 23.7s
Tokeni: 4,924 tok

Historia ya uendeshaji

Imepimwa tarehe	Alama	Uaminifu	Jumla ya gharama	Linganisha
2026-08-14 03:26 Jaribio tena	5.6	9.6	$0.048	Linganisha
2026-07-16 23:34 Jaribio jipya limeongezwa	5.6	9.9	$0.048	Uendeshaji wa sasa
2026-07-14 11:05 Uendeshaji wa kwanza	6.2	9.7	$0.045	Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

Uendeshaji	Ufunikaji wa benchmark	Alama	Uthabiti	Uaminifu	Majaribio sahihi	Majaribio yasiyo thabiti	Jumla ya tokeni za matokeo	Jumla ya tokeni za ingizo	Jumla ya gharama	Muda wa majibu (wastani)
2026-07-16 23:34 · Jaribio jipya limeongezwa	marudio 66/66	5.6	8.9	9.9	8/22	3	66,174	51,472	$0.048	8.42s
2026-08-14 03:26 · Jaribio tena	marudio 66/66	5.6	8.9	9.6	8/22	3	66,576	51,369	$0.048	8.65s
Tofauti	—	0.0	0.0	+0.3	0	0	-402	+103	-$0.001	-232ms

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe	Bei ya ingizo	Bei ya toleo
2026-07-14 11:25	$0.150 / 1M	$0.600 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Modeli bora kwa alama

Alama vs Jumla ya gharama

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Kategoria	Alama	Uthabiti
Mbinu za kupinga AI	8.7	8.0
Uandishi wa msimbo	3.6	7.0
Mchanganyiko	6.5	10.0
Uchanganuzi na uchimbaji wa data	6.5	10.0
Mahususi kwa domeni	3.0	10.0
Akili ya jumla	5.0	10.0
Ufuataji wa maagizo	10.0	10.0
Utatuzi wa mafumbo	3.6	7.2
Mwito wa zana	10.0	10.0
Maarifa ya jumla	3.0	10.0

KAT-Coder-Air V2.5

Taarifa za modeli

Hamster playing table tennis

#141 KAT-Coder-Air V2.5

Chati

Modeli bora kwa alama

Alama vs Jumla ya gharama

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Modeli zilizolinganishwa