नेव्हिगेशन
AI BENCHY
Advertise here

Gemini 3.5 Flash vs KAT-Coder-Pro V2.5 (medium)

KAT-Coder-Pro V2.5 (medium) average score मध्ये पुढे आहे: 6.9 vs 6.9. KAT-Coder-Pro V2.5 (medium) चा benchmark खर्च कमी आहे: $0.478 vs $1.093. Gemini 3.5 Flash वेगवान आहे: 10.18s vs 24.87s, pass rates 69.7% vs 65.2%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-08-29

क्रमांक
#129
एकूण आउटपुट टोकन्स
119,100
प्रतिसाद वेळ (सरासरी)
10.18s
एकूण खर्च
$1.093
क्रमांक
#126
एकूण आउटपुट टोकन्स
139,375
प्रतिसाद वेळ (सरासरी)
24.87s
एकूण खर्च
$0.478
शिफारस केलेले मॉडेल KAT-Coder-Pro V2.5 (medium)

It has the best score here (6.9), while costing about 2.3x less than Gemini 3.5 Flash.

तपशीलवार तुलना

मेट्रिक Gemini 3.5 Flash Gemini 3.5 Flash none प्रकाशन: 2026-05-19 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium प्रकाशन: 2026-07-14
स्कोअर 6.9 6.9
क्रमांक #129 #126
विश्वसनीयता 10.0 10.0
सुसंगतता 8.9 7.0
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 69.7% 65.2%
अस्थिर चाचण्या 3 8
एकूण रन 66 66
प्रति निकाल खर्च 7.805 4.342
एकूण खर्च $1.093 $0.478
इनपुट किंमत $1.500 / 1M $0.740 / 1M
आउटपुट किंमत $9.000 / 1M $2.960 / 1M
एकूण इनपुट टोकन्स 13,852 87,916
आउटपुट टोकन्स 119,100 7,213
रिझनिंग टोकन्स 0 132,162
प्रतिसाद वेळ (सरासरी) 10.18s 24.87s
प्रतिसाद वेळ (कमाल) 64.36s 257.00s
प्रतिसाद वेळ (एकूण) 183.29s 547.14s
पॅरामीटर्स ~500B एकूण (~20B सक्रिय) ~700B एकूण (~72B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#129 Gemini 3.5 Flash

none
खर्च
$0.225
वेळ
125.5s
टोकन्स
25,004 tok

#126 KAT-Coder-Pro V2.5

medium
खर्च
$0.009
वेळ
25.6s
टोकन्स
2,939 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Gemini 3.5 Flash 8.8 7.8 88.9% 1 34.69s 8,122 75,927 0
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

झटपट तुलना

तुलना जोडी बदला