नेव्हिगेशन
Advertise here

KAT Coder AIR V2.5 (default) vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) average score मध्ये पुढे आहे: 4.6 vs 4.4. KAT Coder AIR V2.5 (default) चा benchmark खर्च कमी आहे: $0.070 vs $0.175. KAT Coder AIR V2.5 (default) वेगवान आहे: 11.96s vs 83.19s, pass rates 34.8% vs 40.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-22

तुलना केलेली मॉडेल्स

क्रमांक
#465
एकूण आउटपुट टोकन्स
97,752
प्रतिसाद वेळ (सरासरी)
11.96s
एकूण खर्च
$0.070
क्रमांक
#456
एकूण आउटपुट टोकन्स
647,336
प्रतिसाद वेळ (सरासरी)
83.19s
एकूण खर्च
$0.175
शिफारस केलेले मॉडेल KAT Coder AIR V2.5 (default)

Its score stays close to the best score here (4.4 vs 4.6), while costing about 2.5x less than Nemotron 3.5 Lightning (low).

तपशीलवार तुलना

मेट्रिक KAT Coder AIR V2.5 KAT Coder AIR V2.5 default प्रकाशन: 2026-07-14 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low प्रकाशन: 2026-08-11 मोफत उपलब्ध
स्कोअर 4.4 4.6
क्रमांक #465 #456
विश्वसनीयता 10.0 9.5
सुसंगतता 7.4 6.8
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 34.8% 40.6%
अस्थिर चाचण्या 7 9
एकूण रन 69 69
प्रति निकाल खर्च 1.382 0.000
एकूण खर्च $0.070 $0.175
इनपुट किंमत $0.150 / 1M $0.060 / 1M
आउटपुट किंमत $0.600 / 1M $0.160 / 1M
कॅश वाचण्याची किंमत लागू नाही $0.030 / 1M
कॅश लिहिण्याची किंमत लागू नाही लागू नाही
एकूण इनपुट टोकन्स 69,376 207,883
आउटपुट टोकन्स 7,792 144,718
रिझनिंग टोकन्स 89,960 525,897
प्रतिसाद वेळ (सरासरी) 11.96s 83.19s
प्रतिसाद वेळ (कमाल) 121.05s 597.61s
प्रतिसाद वेळ (एकूण) 275.18s 1913.41s
पॅरामीटर्स ~35B एकूण (~3B सक्रिय) 30B एकूण (3B सक्रिय)
उपलब्धता बंद स्रोत वेट्स उपलब्ध

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#465 KAT Coder AIR V2.5

default
खर्च
$0.002
वेळ
14.5s
टोकन्स
2,619 tok

#456 Nemotron 3.5 Lightning

low
खर्च
$0.000
वेळ
32.2s
टोकन्स
6,089 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT Coder AIR V2.5 3.3 9.6 0.0% 0 14.31s 6,472 2,032 14,886
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

तुलना जोडी बदला