नेव्हिगेशन
Advertise here

KAT-Coder-Pro V2.5 (low) vs Step 3.7 Flash (high)

average score जवळपास समान आहे: 6.5 vs 6.6. KAT-Coder-Pro V2.5 (low) चा benchmark खर्च कमी आहे: $0.568 vs $1.478. KAT-Coder-Pro V2.5 (low) वेगवान आहे: 19.40s vs 72.72s, pass rates 65.2% vs 58.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक
#266
एकूण आउटपुट टोकन्स
113,193
प्रतिसाद वेळ (सरासरी)
19.40s
एकूण खर्च
$0.568
क्रमांक
#264
एकूण आउटपुट टोकन्स
1,100,052
प्रतिसाद वेळ (सरासरी)
72.72s
एकूण खर्च
$1.478
शिफारस केलेले मॉडेल KAT-Coder-Pro V2.5 (low)

It has the best score here (6.5), while costing about 2.6x less than Step 3.7 Flash (high).

तपशीलवार तुलना

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14 Step 3.7 Flash Step 3.7 Flash high प्रकाशन: 2026-05-29
स्कोअर 6.5 6.6
क्रमांक #266 #264
विश्वसनीयता 10.0 10.0
सुसंगतता 7.1 8.5
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 65.2% 58.0%
अस्थिर चाचण्या 8 4
एकूण रन 69 69
प्रति निकाल खर्च 3.636 12.267
एकूण खर्च $0.568 $1.478
इनपुट किंमत $0.740 / 1M $0.200 / 1M
आउटपुट किंमत $2.960 / 1M $1.150 / 1M
कॅश वाचण्याची किंमत $0.150 / 1M $0.040 / 1M
कॅश लिहिण्याची किंमत लागू नाही लागू नाही
एकूण इनपुट टोकन्स 87,682 421,200
आउटपुट टोकन्स 7,166 1,100,052
रिझनिंग टोकन्स 106,027 0
प्रतिसाद वेळ (सरासरी) 19.40s 72.72s
प्रतिसाद वेळ (कमाल) 209.15s 364.99s
प्रतिसाद वेळ (एकूण) 446.11s 1672.53s
पॅरामीटर्स ~700B एकूण (~72B सक्रिय) 198B एकूण (11B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#266 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

#264 Step 3.7 Flash

high
खर्च
$0.007
वेळ
63.6s
टोकन्स
6,030 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

तुलना जोडी बदला