AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#99

KAT-Coder-Pro V2.5

Kwaipilot Toleo: 2026-07-14 Imepimwa tarehe: 2026-08-14 03:23 kwaipilot/kat-coder-pro-v2.5::low
~700B jumla (~72B vinavyotumika)MoEImefungwaMakadirio
(high) (medium) (low) (none)

Muhtasari

KAT-Coder-Pro V2.5 hupata alama 7.3 kwenye AI BENCHY na iko nafasi ya #99. Ina reliability 10.0, pass rate 68.2%, gharama jumla $0.400, na wastani wa response time 20.20s.

Kinachofanya KAT-Coder-Pro V2.5 iwe ya kipekee: Inaonekana zaidi kwenye Ufuataji wa maagizo, ambako iko #1; huku Akili ya jumla ikiwa eneo lake dhaifu zaidi kwenye #17.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~700B jumla (~72B vinavyotumika)
Muundo
MoE
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo Chanzo cha upatikanaji

Alama

7.3

Uthabiti

7.0

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.400

Jumla ya tokeni za matokeo

113,193

Jumla ya tokeni za ingizo

87,682

Bei ya ingizo

$0.740 / 1M

Bei ya toleo

$2.960 / 1M

Majaribio sahihi

Majaribio yenye makosa: 11

Kiwango cha kupita kwa kila jaribio: 68.2%

Majaribio yasiyo thabiti

8

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

20.20s

Muda wa majibu (upeo): 209.15s

Muda wa majibu (jumla): 444.35s

Jibu lisilo sahihi: 10 Hitilafu ya API: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#99 KAT-Coder-Pro V2.5

low
Gharama
$0.016
Muda
47.6s
Tokeni
5,182 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 03:23 Jaribio tena 7.3 10.0 $0.400 Uendeshaji wa sasa
2026-07-16 23:38 Jaribio jipya limeongezwa 7.4 10.0 $0.387 Linganisha
2026-07-14 11:05 Uendeshaji wa kwanza 8.0 9.9 $0.220 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

KAT-Coder-Pro V2.5lowvsClaude Sonnet 4.6noneKAT-Coder-Pro V2.5lowvsGemini 3.1 Flash LitemediumKAT-Coder-Pro V2.5lowvsGemini 3 Flash PreviewlowKAT-Coder-Pro V2.5lowvsQwen3.7 PlusnoneKAT-Coder-Pro V2.5lowvsGrok 4.6lowKAT-Coder-Pro V2.5lowvsDeepSeek V4 Flash 0731mediumKAT-Coder-Pro V2.5lowvsQwen3.8 2.4T A95BhighKAT-Coder-Pro V2.5lowvsClaude Opus 4.8noneKAT-Coder-Pro V2.5lowvsLongCat 2.0mediumKAT-Coder-Pro V2.5lowvsKimi K2.6medium

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 6.9 5.8
Uandishi wa msimbo 7.8 10.0
Mchanganyiko 6.4 5.8
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 3.5 4.4
Akili ya jumla 4.1 2.7
Ufuataji wa maagizo 10.0 10.0
Utatuzi wa mafumbo 6.4 4.4
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa