AI BENCHY
Advertise here

#153

Mercury 2

Inception Toleo: 2026-02-24 Imepimwa tarehe: 2026-05-22 00:39 inception/mercury-2::none
(medium) (none)

Alama

4.6

Uthabiti

9.1

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.009

Jumla ya tokeni za matokeo

3,001

Jumla ya tokeni za ingizo

25,515

Bei ya ingizo

$0.250 / 1M

Bei ya toleo

$0.750 / 1M

Majaribio sahihi

Majaribio yenye makosa: 16

Kiwango cha kupita kwa kila jaribio: 25.0%

Majaribio yasiyo thabiti

2

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

614ms

Muda wa majibu (upeo): 1.27s

Muda wa majibu (jumla): 12.28s

Jibu lisilo sahihi: 15 Hakufuata maelekezo: 1

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-05-22 00:39 Suite imebadilika 4.6 10.0 $0.009 Uendeshaji wa sasa
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 4.8 Haipo $0.007 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-05-22 00:39 · Uendeshaji wa sasa4.69.110.04/2023,00125,515$0.009614ms
2026-04-11 01:44 · Jaribio la kwanza lililorekodiwa4.89.0Haipo4/1821,6250$0.007613ms
Tofauti-0.2+0.100+1376+25515+$0.003+1ms

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-06-03 21:35 $0.250 / 1M $0.750 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mercury 2nonevsGLM 5 TurbononeMercury 2nonevsElephant AlphamediumMercury 2nonevsQwen3.5-122B-A10BnoneMercury 2nonevsLing-2.6-flashnoneMercury 2nonevsDeepSeek V3.2noneMercury 2nonevsElephant AlphanoneMercury 2nonevsGemini 3 Flash PreviewmediumMercury 2nonevsGemini 3.5 FlashhighMercury 2nonevsRing-2.6-1TmediumMercury 2nonevsGemini 3.5 Flashlow

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 3.0 10.0
Uandishi wa msimbo 3.5 9.4
Mchanganyiko 3.0 10.0
Uchanganuzi na uchimbaji wa data 7.3 5.9
Mahususi kwa domeni 5.3 7.2
Akili ya jumla 4.8 10.0
Ufuataji wa maagizo 6.5 10.0
Utatuzi wa mafumbo 3.1 10.0
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa