नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Luna

सारांश

KAT-Coder-Pro V2.5 (high) average score मध्ये पुढे आहे: 7.7 vs 7.6. KAT-Coder-Pro V2.5 (high) चा benchmark खर्च कमी आहे: $0.246 vs $0.258. GPT-5.6 Luna (medium) वेगवान आहे: 6.70s vs 12.30s, pass rates 63.5% vs 63.5%.

शिफारस केलेले मॉडेलGPT-5.6 Luna (medium)Its score stays close to the best score here (7.6 vs 7.7), while responding about 1.8x faster than KAT-Coder-Pro V2.5 (high).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high प्रकाशन: 2026-07-14 GPT-5.6 Luna GPT-5.6 Luna medium प्रकाशन: 2026-07-09
स्कोअर 7.7 7.6
क्रमांक #53 #57
विश्वसनीयता 10.0 10.0
सुसंगतता 8.1 9.6
बरोबर चाचण्या
प्रति प्रयत्न पास दर 63.5% 63.5%
अस्थिर चाचण्या 5 1
एकूण रन 63 63
प्रति निकाल खर्च 2.228 1.978
एकूण खर्च $0.246 $0.258
इनपुट किंमत $0.740 / 1M $1.000 / 1M
आउटपुट किंमत $2.960 / 1M $6.000 / 1M
एकूण इनपुट टोकन्स 42,750 35,699
आउटपुट टोकन्स 2,509 2,148
रिझनिंग टोकन्स 69,594 34,740
प्रतिसाद वेळ (सरासरी) 12.30s 6.70s
प्रतिसाद वेळ (कमाल) 95.65s 29.85s
प्रतिसाद वेळ (एकूण) 258.34s 140.62s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
खर्च
$0.009
वेळ
26.4s
टोकन्स
3,117 tok

#57 GPT-5.6 Luna

medium
खर्च
$0.014
वेळ
14.6s
टोकन्स
2,362 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GPT-5.6 Luna 5.4 7.2 44.4% 1 10.38s 7,302 564 9,928

झटपट तुलना

तुलना जोडी बदला