नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Air V2.5 vs Nemotron 3 Ultra 550b A55b

सारांश

KAT-Coder-Air V2.5 (medium) average score में आगे है: 6.2 vs 6.1. Nemotron 3 Ultra 550b A55b की benchmark लागत कम है: $0.027 vs $0.045. Nemotron 3 Ultra 550b A55b तेज है: 2.27s vs 8.28s, pass rates 47.6% vs 44.4%.

अनुशंसित मॉडलNemotron 3 Ultra 550b A55bIts score stays close to the best score here (6.1 vs 6.2), while costing about 1.7x less than KAT-Coder-Air V2.5 (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium रिलीज़: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b none रिलीज़: 2026-06-04 निःशुल्क उपलब्ध
स्कोर 6.2 6.1
रैंक #115 #121
विश्वसनीयता 9.7 10.0
संगति 8.8 9.2
सही परीक्षण
प्रति प्रयास पास दर 47.6% 44.4%
अस्थिर टेस्ट 3 2
कुल रन 63 63
प्रति परिणाम लागत 0.562 0.000
कुल लागत $0.045 $0.027
इनपुट कीमत $0.150 / 1M $0.500 / 1M
आउटपुट कीमत $0.600 / 1M $2.200 / 1M
कुल इनपुट टोकन 42,750 43,326
आउटपुट टोकन 7,759 2,138
रीजनिंग टोकन 56,357 0
प्रतिक्रिया समय (औसत) 8.28s 2.27s
प्रतिक्रिया समय (अधिकतम) 48.19s 13.49s
प्रतिक्रिया समय (कुल) 173.80s 47.65s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 KAT-Coder-Air V2.5

medium
लागत
$0.003
समय
23.7s
टोकन
4,924 tok

#121 Nemotron 3 Ultra 550b A55b

none
लागत
$0.000
समय
149.6s
टोकन
3,405 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973
Nemotron 3 Ultra 550b A55b 5.5 10.0 33.3% 0 1.02s 7,623 369 0

त्वरित तुलना

तुलना जोड़ी बदलें