नेव्हिगेशन
Advertise here

KAT Coder AIR V2.5 (high) vs Nemotron 3.5 Lightning (high)

average score जवळपास समान आहे: 5.2 vs 5.2. KAT Coder AIR V2.5 (high) चा benchmark खर्च कमी आहे: $0.077 vs $0.168. KAT Coder AIR V2.5 (high) वेगवान आहे: 15.23s vs 77.08s, pass rates 40.6% vs 47.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-12

तुलना केलेली मॉडेल्स

क्रमांक
#309
एकूण आउटपुट टोकन्स
114,654
प्रतिसाद वेळ (सरासरी)
15.23s
एकूण खर्च
$0.077
क्रमांक
#308
एकूण आउटपुट टोकन्स
626,081
प्रतिसाद वेळ (सरासरी)
77.08s
एकूण खर्च
$0.168
शिफारस केलेले मॉडेल KAT Coder AIR V2.5 (high)

It has the best score here (5.2), while costing about 2.2x less than Nemotron 3.5 Lightning (high).

तपशीलवार तुलना

मेट्रिक KAT Coder AIR V2.5 KAT Coder AIR V2.5 high प्रकाशन: 2026-07-14 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high प्रकाशन: 2026-08-11 मोफत उपलब्ध
स्कोअर 5.2 5.2
क्रमांक #309 #308
विश्वसनीयता 9.8 9.6
सुसंगतता 8.2 5.7
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 40.6% 47.8%
अस्थिर चाचण्या 5 12
एकूण रन 69 69
प्रति निकाल खर्च 1.091 0.000
एकूण खर्च $0.077 $0.168
इनपुट किंमत $0.150 / 1M $0.060 / 1M
आउटपुट किंमत $0.600 / 1M $0.160 / 1M
कॅश वाचण्याची किंमत लागू नाही $0.030 / 1M
कॅश लिहिण्याची किंमत लागू नाही लागू नाही
एकूण इनपुट टोकन्स 50,423 170,517
आउटपुट टोकन्स 4,144 149,968
रिझनिंग टोकन्स 110,510 509,725
प्रतिसाद वेळ (सरासरी) 15.23s 77.08s
प्रतिसाद वेळ (कमाल) 118.35s 490.99s
प्रतिसाद वेळ (एकूण) 350.26s 1772.78s
पॅरामीटर्स ~35B एकूण (~3B सक्रिय) 30B एकूण (3B सक्रिय)
उपलब्धता बंद स्रोत वेट्स उपलब्ध

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#309 KAT Coder AIR V2.5

high
Reached the allocated time limit (300 seconds) without receiving showcase output.
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

#308 Nemotron 3.5 Lightning

high
खर्च
$0.000
वेळ
92.8s
टोकन्स
11,343 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT Coder AIR V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

तुलना जोडी बदला