नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Air V2.5 vs NVIDIA: Nemotron 3 Super

सारांश

Nemotron 3 Super (medium) average score में आगे है: 6.3 vs 6.2. Nemotron 3 Super (medium) की benchmark लागत कम है: $0.020 vs $0.064. KAT-Coder-Air V2.5 (high) तेज है: 11.02s vs 32.00s, pass rates 46.0% vs 41.3%.

अनुशंसित मॉडलKAT-Coder-Air V2.5 (high)Its score stays close to the best score here (6.2 vs 6.3), while responding about 2.9x faster than Nemotron 3 Super (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high रिलीज़: 2026-07-14 Nemotron 3 Super Nemotron 3 Super medium रिलीज़: 2026-03-11 निःशुल्क उपलब्ध
स्कोर 6.2 6.3
रैंक #110 #105
विश्वसनीयता 9.7 10.0
संगति 7.6 9.2
सही परीक्षण
प्रति प्रयास पास दर 46.0% 41.3%
अस्थिर टेस्ट 6 2
कुल रन 63 63
प्रति परिणाम लागत 0.910 0.004
कुल लागत $0.064 $0.020
इनपुट कीमत $0.150 / 1M $0.080 / 1M
आउटपुट कीमत $0.600 / 1M $0.450 / 1M
कुल इनपुट टोकन 41,748 37,527
आउटपुट टोकन 3,894 14,850
रीजनिंग टोकन 91,773 33,754
प्रतिक्रिया समय (औसत) 11.02s 32.00s
प्रतिक्रिया समय (अधिकतम) 104.98s 232.25s
प्रतिक्रिया समय (कुल) 231.37s 607.91s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

#105 Nemotron 3 Super

medium
लागत
$0.000
समय
272.6s
टोकन
5,296 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Nemotron 3 Super 3.1 10.0 0.0% 0 147.32s 2,275 797 4,424

त्वरित तुलना

तुलना जोड़ी बदलें