नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs StepFun: Step 3.7 Flash

सारांश

Claude Sonnet 4.6 average score मध्ये पुढे आहे: 7.3 vs 7.1. Claude Sonnet 4.6 चा benchmark खर्च कमी आहे: $0.316 vs $1.148. Claude Sonnet 4.6 वेगवान आहे: 5.04s vs 64.46s, pass rates 55.6% vs 63.5%.

शिफारस केलेले मॉडेलClaude Sonnet 4.6It has the best score here (7.3), while costing about 3.6x less than Step 3.7 Flash (high).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Claude Sonnet 4.6 Claude Sonnet 4.6 none प्रकाशन: 2026-02-17 Step 3.7 Flash Step 3.7 Flash high प्रकाशन: 2026-05-29
स्कोअर 7.3 7.1
क्रमांक #71 #79
विश्वसनीयता 10.0 10.0
सुसंगतता 9.7 8.2
बरोबर चाचण्या
प्रति प्रयत्न पास दर 55.6% 63.5%
अस्थिर चाचण्या 1 4
एकूण रन 63 63
प्रति निकाल खर्च 2.870 10.434
एकूण खर्च $0.316 $1.148
इनपुट किंमत $3.000 / 1M $0.200 / 1M
आउटपुट किंमत $15.000 / 1M $1.150 / 1M
एकूण इनपुट टोकन्स 57,886 38,391
आउटपुट टोकन्स 9,465 991,355
रिझनिंग टोकन्स 0 0
प्रतिसाद वेळ (सरासरी) 5.04s 64.46s
प्रतिसाद वेळ (कमाल) 23.84s 364.99s
प्रतिसाद वेळ (एकूण) 70.60s 1353.57s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Claude Sonnet 4.6

none
खर्च
$0.038
वेळ
27.3s
टोकन्स
2,598 tok

#79 Step 3.7 Flash

high
खर्च
$0.007
वेळ
63.6s
टोकन्स
6,030 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 5.5 10.0 33.3% 0 5.19s 8,522 2,127 0
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

झटपट तुलना

तुलना जोडी बदला