नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs Nemotron 3 Ultra 550b A55b

सारांश

Nemotron 3 Ultra 550b A55b (medium) average score में आगे है: 8.1 vs 6.8. Nemotron 3 Ultra 550b A55b (medium) की benchmark लागत कम है: $0.158 vs $0.220. KAT-Coder-Pro V2.5 तेज है: 10.81s vs 15.05s, pass rates 71.4% vs 69.8%.

अनुशंसित मॉडलNemotron 3 Ultra 550b A55b (medium)It has the strongest score in this comparison (8.1) and the best overall balance of cost and response time across all 2 models.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none रिलीज़: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium रिलीज़: 2026-06-04 निःशुल्क उपलब्ध
स्कोर 6.8 8.1
रैंक #89 #31
विश्वसनीयता 10.0 9.7
संगति 7.3 8.8
सही परीक्षण
प्रति प्रयास पास दर 71.4% 69.8%
अस्थिर टेस्ट 7 3
कुल रन 63 63
प्रति परिणाम लागत 1.992 0.000
कुल लागत $0.220 $0.158
इनपुट कीमत $0.740 / 1M $0.500 / 1M
आउटपुट कीमत $2.960 / 1M $2.200 / 1M
कुल इनपुट टोकन 42,749 46,813
आउटपुट टोकन 63,338 18,002
रीजनिंग टोकन 0 53,091
प्रतिक्रिया समय (औसत) 10.81s 15.05s
प्रतिक्रिया समय (अधिकतम) 53.57s 43.93s
प्रतिक्रिया समय (कुल) 227.02s 316.09s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
लागत
$0.010
समय
29.0s
टोकन
3,439 tok

#31 Nemotron 3 Ultra 550b A55b

medium
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

त्वरित तुलना

तुलना जोड़ी बदलें