Urambazaji
Advertise here

Mercury 2.5 vs LFM3-1.7B (default)

Mercury 2.5 inaongoza kwa average score: 4.1 vs 4.1. Mercury 2.5 ina gharama ya chini ya benchmark: $0.026 vs $0.084. Mercury 2.5 ni ya haraka zaidi: 5.10s vs 16.99s, na pass rates 24.6% vs 34.8%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-11-10

Modeli zilizolinganishwa

Nafasi
#429
Jumla ya tokeni za matokeo
89,958
Muda wa majibu (wastani)
5.10s
Jumla ya gharama
$0.026
Nafasi
#430
Jumla ya tokeni za matokeo
329,997
Muda wa majibu (wastani)
16.99s
Jumla ya gharama
$0.084
Muundo unaopendekezwa Mercury 2.5

It has the best score here (4.1), while costing about 3.2x less than LFM3-1.7B (default).

Ulinganisho wa kina

Kipimo Mercury 2.5 Mercury 2.5 none Toleo: 2026-09-08 LFM3-1.7B LFM3-1.7B default Toleo: 2026-11-06 Inapatikana bure
Alama 4.1 4.1
Nafasi #429 #430
Uaminifu 10.0 10.0
Uthabiti 7.6 8.2
Majaribio 69/69 69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 24.6% 34.8%
Majaribio yasiyo thabiti 7 5
Jumla ya uendeshaji 69 69
Gharama kwa matokeo 1.298 1.672
Jumla ya gharama $0.026 $0.084
Bei ya ingizo $0.040 / 1M $0.080 / 1M
Bei ya toleo $0.150 / 1M $0.200 / 1M
Bei ya kusoma akiba $0.004 / 1M $0.020 / 1M
Bei ya kuandika akiba Haipo Haipo
Jumla ya tokeni za ingizo 311,488 219,830
Tokeni za matokeo 89,958 5,711
Tokeni za hoja 0 324,286
Muda wa majibu (wastani) 5.10s 16.99s
Muda wa majibu (upeo) 63.41s 56.52s
Muda wa majibu (jumla) 117.24s 390.77s
Vigezo ~100B 1.7B
Upatikanaji Imefungwa Uzani unapatikana

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#429 Mercury 2.5

none
Gharama
$0.001
Muda
2.7s
Tokeni
2,749 tok

#430 LiquidAI: LFM3-1.7B

default
OpenRouter returned no showcase content (finish_reason: length).
Gharama
$0.002
Muda
23.3s
Tokeni
8,320 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
LFM3-1.7B 2.9 10.0 0.0% 0 26.48s 7,461 0 73,728

Badilisha jozi ya ulinganisho