AI BENCHY
Advertise here
#74

Mercury 2

Inception Toleo: 2026-02-24 Imepimwa tarehe: 2026-07-16 23:14 inception/mercury-2::medium
~100BNyingineImefungwaMakadirio
(medium) (none)

Muhtasari

Mercury 2 hupata alama 7.0 kwenye AI BENCHY na iko nafasi ya #74. Ina reliability 10.0, pass rate 51.5%, gharama jumla $0.093, na wastani wa response time 2.72s.

Kinachofanya Mercury 2 iwe ya kipekee: Ni ya haraka kwa kiasi kikubwa ikilinganishwa na modeli zinazofanana.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~100B
Muundo
Nyingine
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo Chanzo cha upatikanaji

Alama

7.0

Uthabiti

8.8

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.093

Jumla ya tokeni za matokeo

87,119

Jumla ya tokeni za ingizo

109,572

Bei ya ingizo

$0.250 / 1M

Bei ya toleo

$0.750 / 1M

Majaribio sahihi

Majaribio yenye makosa: 12

Kiwango cha kupita kwa kila jaribio: 51.5%

Majaribio yasiyo thabiti

3

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

2.72s

Muda wa majibu (upeo): 14.63s

Muda wa majibu (jumla): 57.12s

Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Mercury 2

medium
Gharama
$0.002
Muda
2.1s
Tokeni
1,702 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 03:05 Jaribio tena 7.0 10.0 $0.094 Linganisha
2026-07-16 23:14 Jaribio jipya limeongezwa 7.0 10.0 $0.093 Uendeshaji wa sasa
2026-06-04 14:27 Jaribio jipya limeongezwa 6.6 10.0 $0.058 Linganisha
2026-05-22 00:40 Jaribio tena 6.3 10.0 $0.055 Linganisha
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 6.5 Haipo $0.047 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-06-04 15:40 $0.250 / 1M $0.750 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mercury 2mediumvsGPT-5.5noneMercury 2mediumvsGrok 4.20mediumMercury 2mediumvsGLM 5.1mediumMercury 2mediumvsSeed-2.0-MinimediumMercury 2mediumvsDeepSeek V3.2mediumMercury 2mediumvsKimi K2.5mediumMercury 2mediumvsGPT-5.6 SolnoneMercury 2mediumvsKAT-Coder-Pro V2.5mediumMercury 2mediumvsGrok 4.3mediumMercury 2mediumvsClaude Fable 5.1low

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 6.9 9.9
Uandishi wa msimbo 8.2 7.7
Mchanganyiko 6.7 9.1
Uchanganuzi na uchimbaji wa data 7.3 5.9
Mahususi kwa domeni 2.9 7.2
Akili ya jumla 4.8 10.0
Ufuataji wa maagizo 10.0 10.0
Utatuzi wa mafumbo 5.4 10.0
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa