AI BENCHY
Advertise here
#56

Step 3.7 Flash

Stepfun Toleo: 2026-05-29 Imepimwa tarehe: 2026-06-04 13:49 stepfun/step-3.7-flash::low
198B jumla (11B vinavyotumika)MoEChanzo huria
(high) (medium) (low)

Muhtasari

Step 3.7 Flash hupata alama 7.3 kwenye AI BENCHY na iko nafasi ya #56. Ina reliability 10.0, pass rate 68.3%, gharama jumla $0.341, na wastani wa response time 15.74s.

Kinachofanya Step 3.7 Flash iwe ya kipekee: Inaonekana zaidi kwenye Mchanganyiko, ambako iko #1; huku Akili ya jumla ikiwa eneo lake dhaifu zaidi kwenye #18.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Imeripotiwa
Vigezo
198B jumla (11B vinavyotumika)
Muundo
MoE
Upatikanaji
Chanzo huria
Leseni
Apache-2.0
Chanzo cha vigezo Chanzo cha upatikanaji

Alama

7.3

Uthabiti

8.4

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.341

Jumla ya tokeni za matokeo

289,325

Jumla ya tokeni za ingizo

40,101

Bei ya ingizo

$0.200 / 1M

Bei ya toleo

$1.150 / 1M

Majaribio sahihi

Majaribio yenye makosa: 9

Kiwango cha kupita kwa kila jaribio: 68.3%

Majaribio yasiyo thabiti

4

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

15.74s

Muda wa majibu (upeo): 124.75s

Muda wa majibu (jumla): 330.63s

Jibu lisilo sahihi: 8 Hakuna jibu: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Step 3.7 Flash

low
SVG batili
Gharama
$0.004
Muda
25.3s
Tokeni
3,072 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 02:29 Jaribio tena 7.1 10.0 $0.390 Linganisha
2026-07-16 22:46 Jaribio jipya limeongezwa 7.3 10.0 $0.454 Linganisha
2026-06-04 13:49 Jaribio jipya limeongezwa 7.3 10.0 $0.341 Uendeshaji wa sasa
2026-05-29 11:49 Uendeshaji wa kwanza 7.4 10.0 $0.336 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-06-04 13:49 · Jaribio jipya limeongezwamarudio 63/637.38.410.012/214289,32540,101$0.34115.74s
2026-07-16 22:46 · Jaribio jipya limeongezwamarudio 66/667.38.110.012/225376,581103,833$0.45420.68s
Tofauti—0.0+0.30.00-1-87256-63732-$0.114-4938ms

Ufunikaji wa benchmark unatofautiana: marudio 63/63 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 66/66 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-06-04 14:42 $0.200 / 1M $1.150 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Step 3.7 FlashlowvsMuse Glimmer 30BlowStep 3.7 FlashlowvsSolar Pro 4highStep 3.7 FlashlowvsQwen3.5-122B-A10BmediumStep 3.7 FlashlowvsGrok 4.3mediumStep 3.7 FlashlowvsMuse Glimmer 30BmediumStep 3.7 FlashlowvsGPT-5.6 SolnoneStep 3.7 FlashlowvsQwen3.7 FlashlowStep 3.7 FlashlowvsDeepSeek V3.2mediumStep 3.7 FlashlowvsQwen3.5 Plus 2026-04-20mediumStep 3.7 FlashlowvsGLM 5.1medium

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 8.7 7.9
Uandishi wa msimbo 8.2 7.2
Mchanganyiko 10.0 10.0
Uchanganuzi na uchimbaji wa data 7.3 5.8
Mahususi kwa domeni 5.3 7.2
Akili ya jumla 3.4 9.3
Ufuataji wa maagizo 9.8 10.0
Utatuzi wa mafumbo 5.5 9.9
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa