नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Luna

सारांश

KAT-Coder-Pro V2.5 (high) average score में आगे है: 7.7 vs 7.6. KAT-Coder-Pro V2.5 (high) की benchmark लागत कम है: $0.246 vs $0.258. GPT-5.6 Luna (medium) तेज है: 6.70s vs 12.30s, pass rates 63.5% vs 63.5%.

अनुशंसित मॉडलGPT-5.6 Luna (medium)Its score stays close to the best score here (7.6 vs 7.7), while responding about 1.8x faster than KAT-Coder-Pro V2.5 (high).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high रिलीज़: 2026-07-14 GPT-5.6 Luna GPT-5.6 Luna medium रिलीज़: 2026-07-09
स्कोर 7.7 7.6
रैंक #53 #57
विश्वसनीयता 10.0 10.0
संगति 8.1 9.6
सही परीक्षण
प्रति प्रयास पास दर 63.5% 63.5%
अस्थिर टेस्ट 5 1
कुल रन 63 63
प्रति परिणाम लागत 2.228 1.978
कुल लागत $0.246 $0.258
इनपुट कीमत $0.740 / 1M $1.000 / 1M
आउटपुट कीमत $2.960 / 1M $6.000 / 1M
कुल इनपुट टोकन 42,750 35,699
आउटपुट टोकन 2,509 2,148
रीजनिंग टोकन 69,594 34,740
प्रतिक्रिया समय (औसत) 12.30s 6.70s
प्रतिक्रिया समय (अधिकतम) 95.65s 29.85s
प्रतिक्रिया समय (कुल) 258.34s 140.62s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
लागत
$0.009
समय
26.4s
टोकन
3,117 tok

#57 GPT-5.6 Luna

medium
लागत
$0.014
समय
14.6s
टोकन
2,362 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GPT-5.6 Luna 5.4 7.2 44.4% 1 10.38s 7,302 564 9,928

त्वरित तुलना

तुलना जोड़ी बदलें