KAT-Coder-Air V2.5 vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) average score मध्ये पुढे आहे: 4.8 vs 4.8. KAT-Coder-Air V2.5 चा benchmark खर्च कमी आहे: $0.067 vs $0.173. KAT-Coder-Air V2.5 वेगवान आहे: 12.17s vs 59.45s, pass rates 37.9% vs 42.4%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-08-11

क्रमांक: #229
एकूण आउटपुट टोकन्स: 93,913
प्रतिसाद वेळ (सरासरी): 12.17s
एकूण खर्च: $0.067

क्रमांक: #225
एकूण आउटपुट टोकन्स: 653,448
प्रतिसाद वेळ (सरासरी): 59.45s
एकूण खर्च: $0.173

शिफारस केलेले मॉडेल KAT-Coder-Air V2.5

Its score stays close to the best score here (4.8 vs 4.8), while costing about 2.6x less than Nemotron 3.5 Lightning (low).

तपशीलवार तुलना

मेट्रिक	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none प्रकाशन: 2026-07-14	Nemotron 3.5 Lightning Nemotron 3.5 Lightning low प्रकाशन: 2026-08-11 मोफत उपलब्ध

मेट्रिक	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none प्रकाशन: 2026-07-14	Nemotron 3.5 Lightning Nemotron 3.5 Lightning low प्रकाशन: 2026-08-11 मोफत उपलब्ध
स्कोअर	4.8	4.8
क्रमांक	#229	#225
विश्वसनीयता	10.0	9.8
सुसंगतता	6.9	6.8
बेंचमार्क कव्हरेज	22/22 चाचण्या · 66/66 प्रयत्न	22/22 चाचण्या · 66/66 प्रयत्न
बरोबर चाचण्या
प्रति प्रयत्न पास दर	37.9%	42.4%
अस्थिर चाचण्या	8	9
एकूण रन	66	66
प्रति निकाल खर्च	1.336	0.000
एकूण खर्च	$0.067	$0.173
इनपुट किंमत	$0.150 / 1M	$0.100 / 1M
आउटपुट किंमत	$0.600 / 1M	$0.250 / 1M
एकूण इनपुट टोकन्स	69,367	138,783
आउटपुट टोकन्स	93,913	137,292
रिझनिंग टोकन्स	0	516,156
प्रतिसाद वेळ (सरासरी)	12.17s	59.45s
प्रतिसाद वेळ (कमाल)	121.05s	312.21s
प्रतिसाद वेळ (एकूण)	267.83s	1307.87s

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#229 KAT-Coder-Air V2.5

none

खर्च: $0.002
वेळ: 14.5s
टोकन्स: 2,619 tok

#225 Nemotron 3.5 Lightning

low

या मॉडेलसाठी अद्याप कोणताही शोकेस निकाल तयार झालेला नाही.

खर्च: $0.000
वेळ: -
टोकन्स: 0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	5.3	5.6	50.0%	2		2.68s	672	3,044	0
Nemotron 3.5 Lightning	6.9	5.8	75.0%	2		14.82s	696	2,231	13,263

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.3	9.6	0.0%	0		14.31s	6,472	16,918	0
Nemotron 3.5 Lightning	4.0	7.8	11.1%	1		224.42s	7,522	72,614	262,558

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.8	1.6	50.0%	2		73.00s	43,170	50,768	0
Nemotron 3.5 Lightning	6.3	10.0	50.0%	0		142.36s	111,134	17,771	117,066

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	6.3	5.8	66.7%	1		2.66s	7,776	1,268	0
Nemotron 3.5 Lightning	2.9	5.8	16.7%	1		31.32s	7,944	3,462	17,930

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	2.9	7.2	11.1%	1		6.24s	771	7,818	0
Nemotron 3.5 Lightning	3.6	7.2	22.2%	1		50.01s	789	35,039	68,482

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	5.0	10.0	0.0%	0		12.02s	516	656	0
Nemotron 3.5 Lightning	3.7	9.5	0.0%	0		4.61s	516	2,794	2,933

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	9.9	10.0	100.0%	0		1.75s	699	858	0
Nemotron 3.5 Lightning	8.4	6.9	83.3%	1		5.46s	723	434	4,423

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	2.9	4.4	22.2%	2		1.84s	696	1,255	0
Nemotron 3.5 Lightning	3.6	1.8	44.4%	3		6.21s	726	1,402	11,841

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		5.13s	8,391	1,560	0
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		5.08s	8,526	124	2,685

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		17.96s	204	9,768	0
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		38.68s	207	1,421	14,975

झटपट तुलना

तुलना जोडी बदला