AI BENCHY
Advertise here
#143

Mercury 2

Inception Toleo: 2026-02-24 Imepimwa tarehe: 2026-05-22 00:39 inception/mercury-2::none
~100BNyingineImefungwaMakadirio
(medium) (none)

Muhtasari

Mercury 2 hupata alama 4.6 kwenye AI BENCHY na iko nafasi ya #143. Ina reliability 10.0, pass rate 25.0%, gharama jumla $0.009, na wastani wa response time 614ms.

Kinachofanya Mercury 2 iwe ya kipekee: Gharama yake ya benchmark ni ya chini isivyo kawaida kwa kiwango hiki cha score. Ni ya haraka kwa kiasi kikubwa ikilinganishwa na modeli zinazofanana.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~100B
Muundo
Nyingine
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Alama

4.6

Uthabiti

9.1

Uaminifu

10.0

Jumla ya tokeni za matokeo

2,984

Jumla ya tokeni za ingizo

0

Bei ya ingizo

$0.250 / 1M

Bei ya toleo

$0.750 / 1M

Majaribio sahihi

Majaribio yenye makosa: 16

Kiwango cha kupita kwa kila jaribio: 25.0%

Majaribio yasiyo thabiti

2

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

614ms

Muda wa majibu (upeo): 1.27s

Muda wa majibu (jumla): 12.28s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#143 Mercury 2

none
Gharama
$0.002
Muda
1.8s
Tokeni
1,514 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 03:05 Jaribio tena 4.7 10.0 $0.030 Linganisha
2026-07-16 23:13 Jaribio jipya limeongezwa 4.6 10.0 $0.030 Linganisha
2026-06-04 14:27 Jaribio jipya limeongezwa 4.5 10.0 $0.011 Linganisha
2026-05-22 00:39 Suite imebadilika 4.6 10.0 $0.009 Uendeshaji wa sasa
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 4.8 Haipo $0.007 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-05-22 00:39 · Suite imebadilikamarudio 60/604.69.110.04/2022,9840$0.009614ms
2026-08-14 03:05 · Jaribio tenamarudio 66/664.79.210.04/2229,58489,637$0.030825ms
Tofauti-0.1-0.10.000-6600-89637-$0.021-211ms

Ufunikaji wa benchmark unatofautiana: marudio 60/60 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 66/66 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 3.0 10.0
Uandishi wa msimbo 3.5 9.4
Mchanganyiko 3.0 10.0
Uchanganuzi na uchimbaji wa data 7.3 5.9
Mahususi kwa domeni 5.3 7.2
Akili ya jumla 4.8 10.0
Ufuataji wa maagizo 6.5 10.0
Utatuzi wa mafumbo 3.1 10.0
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa