नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5 Mini

सारांश

GPT-5 Mini (medium) average score मध्ये पुढे आहे: 8.5 vs 8.0. GPT-5 Mini (medium) चा benchmark खर्च कमी आहे: $0.159 vs $0.220. KAT-Coder-Pro V2.5 (low) वेगवान आहे: 10.44s vs 23.64s, pass rates 71.4% vs 63.5%.

शिफारस केलेले मॉडेलGPT-5 Mini (medium)It has the strongest score in this comparison (8.5) and the best overall balance of cost and response time across all 2 models.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14 GPT-5 Mini GPT-5 Mini medium प्रकाशन: 2025-08-07
स्कोअर 8.0 8.5
क्रमांक #35 #19
विश्वसनीयता 9.9 10.0
सुसंगतता 7.3 9.1
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.4% 63.5%
अस्थिर चाचण्या 7 2
एकूण रन 63 63
प्रति निकाल खर्च 1.991 1.319
एकूण खर्च $0.220 $0.159
इनपुट किंमत $0.740 / 1M $0.250 / 1M
आउटपुट किंमत $2.960 / 1M $2.000 / 1M
एकूण इनपुट टोकन्स 42,750 37,100
आउटपुट टोकन्स 2,167 6,801
रिझनिंग टोकन्स 61,133 67,690
प्रतिसाद वेळ (सरासरी) 10.44s 23.64s
प्रतिसाद वेळ (कमाल) 51.34s 88.15s
प्रतिसाद वेळ (एकूण) 219.17s 496.44s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

#19 GPT-5 Mini

medium
खर्च
$0.007
वेळ
42.9s
टोकन्स
3,432 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
GPT-5 Mini 10.0 10.0 100.0% 0 27.63s 7,302 658 17,152

झटपट तुलना

तुलना जोडी बदला