नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Step 3.7 Flash (high) vs MiMo-V2.5-Pro (medium)

Step 3.7 Flash (high) average score मध्ये पुढे आहे: 6.8 vs 6.8. MiMo-V2.5-Pro (medium) चा benchmark खर्च कमी आहे: $0.221 vs $1.229. MiMo-V2.5-Pro (medium) वेगवान आहे: 48.68s vs 70.10s, pass rates 60.6% vs 63.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-04

क्रमांक
#146
एकूण आउटपुट टोकन्स
1,050,900
प्रतिसाद वेळ (सरासरी)
70.10s
एकूण खर्च
$1.229
क्रमांक
#152
एकूण आउटपुट टोकन्स
185,466
प्रतिसाद वेळ (सरासरी)
48.68s
एकूण खर्च
$0.221
शिफारस केलेले मॉडेल MiMo-V2.5-Pro (medium)

Its score stays close to the best score here (6.8 vs 6.8), while costing about 5.6x less than Step 3.7 Flash (high).

तपशीलवार तुलना

मेट्रिक Step 3.7 Flash Step 3.7 Flash high प्रकाशन: 2026-05-29 MiMo-V2.5-Pro MiMo-V2.5-Pro medium प्रकाशन: 2026-04-22
स्कोअर 6.8 6.8
क्रमांक #146 #152
विश्वसनीयता 10.0 10.0
सुसंगतता 8.4 7.9
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 60.6% 63.6%
अस्थिर चाचण्या 4 6
एकूण रन 66 66
प्रति निकाल खर्च 11.167 3.790
एकूण खर्च $1.229 $0.221
इनपुट किंमत $0.200 / 1M $0.435 / 1M
आउटपुट किंमत $1.150 / 1M $0.870 / 1M
एकूण इनपुट टोकन्स 98,700 139,892
आउटपुट टोकन्स 1,050,900 15,569
रिझनिंग टोकन्स 0 169,897
प्रतिसाद वेळ (सरासरी) 70.10s 48.68s
प्रतिसाद वेळ (कमाल) 364.99s 333.34s
प्रतिसाद वेळ (एकूण) 1542.14s 1071.02s
पॅरामीटर्स 198B एकूण (11B सक्रिय) 1.02T एकूण (42B सक्रिय)
उपलब्धता मुक्त स्रोत मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#146 Step 3.7 Flash

high
खर्च
$0.007
वेळ
63.6s
टोकन्स
6,030 tok

#152 MiMo-V2.5-Pro

medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0
MiMo-V2.5-Pro 6.2 4.7 66.7% 2 92.07s 6,543 780 51,218

झटपट तुलना

तुलना जोडी बदला