Urambazaji
Advertise here

Gemini 3.7 Flash (low) vs KAT-Coder-Pro V2.5 (default)

Gemini 3.7 Flash (low) inaongoza kwa average score: 9.4 vs 6.1. Gemini 3.7 Flash (low) ina gharama ya chini ya benchmark: $0.183 vs $0.742. Gemini 3.7 Flash (low) ni ya haraka zaidi: 6.24s vs 24.96s, na pass rates 95.7% vs 68.1%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-12

Modeli zilizolinganishwa

Nafasi
#25
Jumla ya tokeni za matokeo
38,453
Muda wa majibu (wastani)
6.24s
Jumla ya gharama
$0.183
Nafasi
#252
Jumla ya tokeni za matokeo
139,572
Muda wa majibu (wastani)
24.96s
Jumla ya gharama
$0.742
Muundo unaopendekezwa Gemini 3.7 Flash (low)

It has the best score here (9.4), while costing about 4.1x less than KAT-Coder-Pro V2.5 (default).

Ulinganisho wa kina

Kipimo Gemini 3.7 Flash Gemini 3.7 Flash low Toleo: 2026-08-14 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default Toleo: 2026-07-14
Alama 9.4 6.1
Nafasi #25 #252
Uaminifu 10.0 10.0
Uthabiti 9.3 7.1
Majaribio 69/69 69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 95.7% 68.1%
Majaribio yasiyo thabiti 2 8
Jumla ya uendeshaji 69 69
Gharama kwa matokeo 0.868 4.419
Jumla ya gharama $0.183 $0.742
Bei ya ingizo $0.750 / 1M $0.740 / 1M
Bei ya toleo $3.750 / 1M $2.960 / 1M
Bei ya kusoma akiba $0.075 / 1M $0.150 / 1M
Bei ya kuandika akiba $0.042 / 1M Haipo
Jumla ya tokeni za ingizo 188,519 98,508
Tokeni za matokeo 7,694 8,088
Tokeni za hoja 30,759 131,484
Muda wa majibu (wastani) 6.24s 24.96s
Muda wa majibu (upeo) 58.75s 335.41s
Muda wa majibu (jumla) 143.56s 574.12s
Vigezo ~500B jumla (~20B vinavyotumika) ~700B jumla (~72B vinavyotumika)
Upatikanaji Imefungwa Imefungwa

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#25 Gemini 3.7 Flash

low
Gharama
$0.010
Muda
23.5s
Tokeni
5,210 tok

#252 KAT-Coder-Pro V2.5

default
Gharama
$0.010
Muda
29.0s
Tokeni
3,439 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Gemini 3.7 Flash 7.6 7.2 77.8% 1 6.20s 8,118 461 11,508
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 451 21,989

Badilisha jozi ya ulinganisho