KAT-Coder-Air V2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) average score मध्ये पुढे आहे: 5.6 vs 5.4. KAT-Coder-Air V2.5 (low) चा benchmark खर्च कमी आहे: $0.046 vs $0.134. KAT-Coder-Air V2.5 (low) वेगवान आहे: 10.63s vs 58.26s, pass rates 43.9% vs 50.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-08-26

क्रमांक: #223
एकूण आउटपुट टोकन्स: 60,414
प्रतिसाद वेळ (सरासरी): 10.63s
एकूण खर्च: $0.046

क्रमांक: #216
एकूण आउटपुट टोकन्स: 654,597
प्रतिसाद वेळ (सरासरी): 58.26s
एकूण खर्च: $0.134

शिफारस केलेले मॉडेल KAT-Coder-Air V2.5 (low)

Its score stays close to the best score here (5.4 vs 5.6), while costing about 2.9x less than Nemotron 3.5 Lightning (high).

तपशीलवार तुलना

मेट्रिक	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low प्रकाशन: 2026-07-14	Nemotron 3.5 Lightning Nemotron 3.5 Lightning high प्रकाशन: 2026-08-11 मोफत उपलब्ध

मेट्रिक	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low प्रकाशन: 2026-07-14	Nemotron 3.5 Lightning Nemotron 3.5 Lightning high प्रकाशन: 2026-08-11 मोफत उपलब्ध
स्कोअर	5.4	5.6
क्रमांक	#223	#216
विश्वसनीयता	9.9	9.9
सुसंगतता	7.8	5.6
प्रयत्न	66/66	66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर	43.9%	50.0%
अस्थिर चाचण्या	6	12
एकूण रन	66	66
प्रति निकाल खर्च	0.649	0.000
एकूण खर्च	$0.046	$0.134
इनपुट किंमत	$0.150 / 1M	$0.080 / 1M
आउटपुट किंमत	$0.600 / 1M	$0.200 / 1M
एकूण इनपुट टोकन्स	61,094	118,016
आउटपुट टोकन्स	6,532	148,344
रिझनिंग टोकन्स	53,882	506,253
प्रतिसाद वेळ (सरासरी)	10.63s	58.26s
प्रतिसाद वेळ (कमाल)	86.23s	285.26s
प्रतिसाद वेळ (एकूण)	233.77s	1281.79s
पॅरामीटर्स	~35B एकूण (~3B सक्रिय)	30B एकूण (3B सक्रिय)
उपलब्धता	बंद स्रोत	वेट्स उपलब्ध

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#223 KAT-Coder-Air V2.5

low

खर्च: $0.004
वेळ: 29.9s
टोकन्स: 6,008 tok

#216 Nemotron 3.5 Lightning

high

खर्च: $0.000
वेळ: 92.8s
टोकन्स: 11,343 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	7.3	5.8	83.3%	2		3.50s	672	422	1,548
Nemotron 3.5 Lightning	5.5	3.7	66.7%	3		10.29s	696	2,432	15,948

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.5	7.3	11.1%	1		11.06s	7,893	2,001	13,623
Nemotron 3.5 Lightning	4.4	5.1	33.3%	2		168.41s	7,623	68,533	242,319

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	6.4	5.8	66.7%	1		55.86s	33,753	2,046	17,833
Nemotron 3.5 Lightning	6.4	10.0	50.0%	0		160.45s	90,257	17,550	119,725

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		2.82s	7,776	261	1,069
Nemotron 3.5 Lightning	7.3	5.9	83.3%	1		13.99s	7,944	3,210	16,835

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		8.91s	562	937	10,224
Nemotron 3.5 Lightning	2.9	4.4	22.2%	2		88.61s	798	45,616	72,496

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	5.0	10.0	0.0%	0		10.11s	516	142	596
Nemotron 3.5 Lightning	3.7	9.5	0.0%	0		7.58s	516	4,331	4,408

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	9.8	10.0	100.0%	0		1.64s	699	89	640
Nemotron 3.5 Lightning	8.5	6.8	83.3%	1		4.98s	723	502	3,779

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.1	4.6	22.2%	2		1.57s	696	294	796
Nemotron 3.5 Lightning	3.6	1.8	44.4%	3		6.09s	726	1,236	9,851

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		4.47s	8,391	330	1,065
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		6.92s	8,526	3,745	3,781

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		19.98s	136	10	6,488
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		77.98s	207	1,189	17,111

झटपट तुलना

तुलना जोडी बदला