Urambazaji
Advertise here

Claude Sonnet 5 vs KAT-Coder-Pro V2.5 (default)

KAT-Coder-Pro V2.5 (default) inaongoza kwa average score: 6.1 vs 5.9. KAT-Coder-Pro V2.5 (default) ina gharama ya chini ya benchmark: $0.742 vs $1.095. Claude Sonnet 5 ni ya haraka zaidi: 8.60s vs 24.96s, na pass rates 40.6% vs 68.1%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-11-18

Modeli zilizolinganishwa

Nafasi
#355
Jumla ya tokeni za matokeo
30,777
Muda wa majibu (wastani)
8.60s
Jumla ya gharama
$1.095
Nafasi
#342
Jumla ya tokeni za matokeo
139,572
Muda wa majibu (wastani)
24.96s
Jumla ya gharama
$0.742
Muundo unaopendekezwa KAT-Coder-Pro V2.5 (default)

Ina alama ya juu zaidi katika ulinganisho huu (6.1) na uwiano bora zaidi wa gharama na muda wa kujibu kati ya modeli 2.

Ulinganisho wa kina

Kipimo Claude Sonnet 5 Claude Sonnet 5 none Toleo: 2026-06-30 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default Toleo: 2026-07-14
Alama 5.9 6.1
Nafasi #355 #342
Uaminifu 10.0 10.0
Uthabiti 8.4 7.1
Majaribio 69/69 69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 40.6% 68.1%
Majaribio yasiyo thabiti 5 8
Jumla ya uendeshaji 69 69
Gharama kwa matokeo 15.642 4.419
Jumla ya gharama $1.095 $0.742
Bei ya ingizo $2.000 / 1M $0.740 / 1M
Bei ya toleo $10.000 / 1M $2.960 / 1M
Bei ya kusoma akiba $0.200 / 1M $0.150 / 1M
Bei ya kuandika akiba $2.500 / 1M Haipo
Jumla ya tokeni za ingizo 393,560 98,508
Tokeni za matokeo 30,466 8,088
Tokeni za hoja 311 131,484
Muda wa majibu (wastani) 8.60s 24.96s
Muda wa majibu (upeo) 64.73s 335.41s
Muda wa majibu (jumla) 197.73s 574.12s
Vigezo ~1T jumla (~100B vinavyotumika) ~700B jumla (~72B vinavyotumika)
Upatikanaji Imefungwa Imefungwa

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#355 Claude Sonnet 5

none
Gharama
$0.061
Muda
53.7s
Tokeni
6,172 tok

#342 KAT-Coder-Pro V2.5

default
Gharama
$0.010
Muda
29.0s
Tokeni
3,439 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Claude Sonnet 5 4.6 7.9 22.2% 1 3.67s 10,590 1,864 0
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 451 21,989

Badilisha jozi ya ulinganisho