नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Terra

सारांश

KAT-Coder-Pro V2.5 (low) average score मध्ये पुढे आहे: 8.0 vs 7.8. KAT-Coder-Pro V2.5 (low) चा benchmark खर्च कमी आहे: $0.220 vs $0.496. GPT-5.6 Terra (medium) वेगवान आहे: 6.69s vs 10.44s, pass rates 71.4% vs 68.3%.

शिफारस केलेले मॉडेलKAT-Coder-Pro V2.5 (low)It has the best score here (8.0), while costing about 2.3x less than GPT-5.6 Terra (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14 GPT-5.6 Terra GPT-5.6 Terra medium प्रकाशन: 2026-07-09
स्कोअर 8.0 7.8
क्रमांक #35 #39
विश्वसनीयता 9.9 10.0
सुसंगतता 7.3 9.2
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.4% 68.3%
अस्थिर चाचण्या 7 2
एकूण रन 63 63
प्रति निकाल खर्च 1.991 3.815
एकूण खर्च $0.220 $0.496
इनपुट किंमत $0.740 / 1M $2.500 / 1M
आउटपुट किंमत $2.960 / 1M $15.000 / 1M
एकूण इनपुट टोकन्स 42,750 34,218
आउटपुट टोकन्स 2,167 1,982
रिझनिंग टोकन्स 61,133 25,370
प्रतिसाद वेळ (सरासरी) 10.44s 6.69s
प्रतिसाद वेळ (कमाल) 51.34s 41.68s
प्रतिसाद वेळ (एकूण) 219.17s 140.49s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

#39 GPT-5.6 Terra

medium
खर्च
$0.035
वेळ
16.3s
टोकन्स
2,418 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
GPT-5.6 Terra 6.1 7.2 55.6% 1 7.19s 7,302 427 4,527

झटपट तुलना

तुलना जोडी बदला