नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: gpt-oss-120b

सारांश

KAT-Coder-Pro V2.5 average score में आगे है: 6.8 vs 6.7. gpt-oss-120b (medium) की benchmark लागत कम है: $0.011 vs $0.220. KAT-Coder-Pro V2.5 तेज है: 10.81s vs 22.28s, pass rates 71.4% vs 52.4%.

अनुशंसित मॉडलgpt-oss-120b (medium)Its score stays close to the best score here (6.7 vs 6.8), while costing about 21.9x less than KAT-Coder-Pro V2.5.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none रिलीज़: 2026-07-14 gpt-oss-120b gpt-oss-120b medium रिलीज़: 2025-08-05 निःशुल्क उपलब्ध
स्कोर 6.8 6.7
रैंक #89 #96
विश्वसनीयता 10.0 10.0
संगति 7.3 8.0
सही परीक्षण
प्रति प्रयास पास दर 71.4% 52.4%
अस्थिर टेस्ट 7 5
कुल रन 63 63
प्रति परिणाम लागत 1.992 0.141
कुल लागत $0.220 $0.011
इनपुट कीमत $0.740 / 1M $0.030 / 1M
आउटपुट कीमत $2.960 / 1M $0.150 / 1M
कुल इनपुट टोकन 42,749 39,084
आउटपुट टोकन 63,338 20,013
रीजनिंग टोकन 0 50,233
प्रतिक्रिया समय (औसत) 10.81s 22.28s
प्रतिक्रिया समय (अधिकतम) 53.57s 68.16s
प्रतिक्रिया समय (कुल) 227.02s 311.96s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
लागत
$0.010
समय
29.0s
टोकन
3,439 tok

#96 gpt-oss-120b

medium
लागत
$0.001
समय
26.7s
टोकन
555 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
gpt-oss-120b 5.9 7.0 55.6% 1 38.37s 7,782 3,365 11,973

त्वरित तुलना

तुलना जोड़ी बदलें