Urambazaji
Advertise here

Claude Fable 5.1 (medium) vs Gemma 4 26B A4B (medium)

average score iko karibu sawa: 7.3 vs 7.3. Gemma 4 26B A4B (medium) ina gharama ya chini ya benchmark: $0.101 vs $3.197. Claude Fable 5.1 (medium) ni ya haraka zaidi: 11.87s vs 105.03s, na pass rates 78.3% vs 71.0%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-02

Modeli zilizolinganishwa

Nafasi
#133
Jumla ya tokeni za matokeo
32,506
Muda wa majibu (wastani)
11.87s
Jumla ya gharama
$3.197
Nafasi
#131
Jumla ya tokeni za matokeo
269,351
Muda wa majibu (wastani)
105.03s
Jumla ya gharama
$0.101
Muundo unaopendekezwa Gemma 4 26B A4B (medium)

It has the best score here (7.3), while costing about 31.7x less than Claude Fable 5.1 (medium).

Ulinganisho wa kina

Kipimo Claude Fable 5.1 Claude Fable 5.1 medium Toleo: 2026-09-02 Gemma 4 26B A4B Gemma 4 26B A4B medium Toleo: 2026-04-03 Inapatikana bure
Alama 7.3 7.3
Nafasi #133 #131
Uaminifu 10.0 10.0
Uthabiti 7.9 9.6
Majaribio 69/69 69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 78.3% 71.0%
Majaribio yasiyo thabiti 6 1
Jumla ya uendeshaji 69 69
Gharama kwa matokeo 21.312 0.679
Jumla ya gharama $3.197 $0.101
Bei ya ingizo $10.000 / 1M $0.090 / 1M
Bei ya toleo $50.000 / 1M $0.300 / 1M
Bei ya kusoma akiba $0.250 / 1M $0.050 / 1M
Bei ya kuandika akiba $12.500 / 1M Haipo
Jumla ya tokeni za ingizo 157,142 224,367
Tokeni za matokeo 8,149 27,095
Tokeni za hoja 24,357 242,256
Muda wa majibu (wastani) 11.87s 105.03s
Muda wa majibu (upeo) 36.59s 912.19s
Muda wa majibu (jumla) 272.91s 2310.63s
Vigezo ~9.5T jumla (~878B vinavyotumika) 25.2B jumla (3.8B vinavyotumika)
Upatikanaji Imefungwa Chanzo huria

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#133 Claude Fable 5.1

medium
Gharama
$0.244
Muda
65.9s
Tokeni
5,025 tok

#131 Gemma 4 26B A4B

medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
Gharama
$0.000
Muda
300.0s
Tokeni
0 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Claude Fable 5.1 7.0 5.0 77.8% 2 10.99s 10,608 525 4,376
Gemma 4 26B A4B 2.9 10.0 0.0% 0 272.54s 5,062 14,838 44,567

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho