AI BENCHY
Advertise here
#46

Muse Spark 1.1

Meta Toleo: 2026-07-16 Imepimwa tarehe: 2026-08-14 03:25 meta/muse-spark-1.1::low
~1T jumla (~50B vinavyotumika)MoEImefungwaMakadirio
(high) (medium) (low)

Muhtasari

Muse Spark 1.1 hupata alama 8.3 kwenye AI BENCHY na iko nafasi ya #46. Ina reliability 10.0, pass rate 71.2%, gharama jumla $0.673, na wastani wa response time 11.89s.

Kinachofanya Muse Spark 1.1 iwe ya kipekee: Inaonekana zaidi kwenye Akili ya jumla, ambako iko #1; huku Ufuataji wa maagizo ikiwa eneo lake dhaifu zaidi kwenye #16. Ni ya haraka kwa kiasi kikubwa ikilinganishwa na modeli zinazofanana.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~1T jumla (~50B vinavyotumika)
Muundo
MoE
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo Chanzo cha upatikanaji

Alama

8.3

Uthabiti

8.5

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.673

Jumla ya tokeni za matokeo

116,489

Jumla ya tokeni za ingizo

141,878

Bei ya ingizo

$1.250 / 1M

Bei ya toleo

$4.250 / 1M

Majaribio sahihi

Majaribio yenye makosa: 9

Kiwango cha kupita kwa kila jaribio: 71.2%

Majaribio yasiyo thabiti

4

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

11.89s

Muda wa majibu (upeo): 54.15s

Muda wa majibu (jumla): 261.69s

Jibu lisilo sahihi: 5 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 Muse Spark 1.1

low
Gharama
$0.020
Muda
39.2s
Tokeni
4,947 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 03:25 Jaribio tena 8.3 10.0 $0.673 Uendeshaji wa sasa
2026-07-16 23:35 Jaribio jipya limeongezwa 8.3 10.0 $0.647 Linganisha
2026-07-16 18:41 Uendeshaji wa kwanza 8.8 10.0 $0.469 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-08-14 03:25 · Uendeshaji wa sasamarudio 66/668.38.510.013/224116,489141,878$0.67311.89s
2026-07-16 18:41 · Uendeshaji wa kwanzamarudio 63/638.88.510.013/21492,66959,923$0.46910.11s
Tofauti—-0.50.00.000+23820+81955+$0.204+1786ms

Ufunikaji wa benchmark unatofautiana: marudio 66/66 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 63/63 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-08-14 12:51 $1.250 / 1M $4.250 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Muse Spark 1.1lowvsInkling SmallhighMuse Spark 1.1lowvsGemini 2.5 FlashmediumMuse Spark 1.1lowvsSeed 2.1 TurbomediumMuse Spark 1.1lowvsClaude Sonnet 5mediumMuse Spark 1.1lowvsQwen3.8 27BhighMuse Spark 1.1lowvsQwen3.8 2.4T A95BlowMuse Spark 1.1lowvsGPT-5.2mediumMuse Spark 1.1lowvsGPT-5 MinimediumMuse Spark 1.1lowvsGrok 4.5lowMuse Spark 1.1lowvsMuse Glimmer 30Bxhigh

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 7.9 6.3
Uandishi wa msimbo 10.0 10.0
Mchanganyiko 6.6 9.1
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 3.6 7.2
Akili ya jumla 10.0 10.0
Ufuataji wa maagizo 7.3 6.0
Utatuzi wa mafumbo 8.3 10.0
Mwito wa zana 9.8 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa