AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs Grok 4.20 Beta

خلاصہ

Nemotron 3 Ultra 550b A55b vs Grok 4.20 Beta benchmark موازنہ: Nemotron 3 Ultra 550b A55b average score میں آگے ہے: 7.5 vs 5.8. Grok 4.20 Beta کی benchmark لاگت کم ہے: $0.087 vs $0.177. Grok 4.20 Beta تیز ہے: 1.19s vs 15.05s، pass rates 69.8% vs 37.0%.

تجویز کردہ ماڈل: Grok 4.20 Beta - It offers the best overall trade-off: a competitive score (5.8), lower cost than Nemotron 3 Ultra 550b A55b, and balanced response time.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-06-10

میٹرک	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium اجرا: 2026-06-04 مفت دستیاب	Grok 4.20 Beta Grok 4.20 Beta none اجرا: 2026-03-12

میٹرک	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium اجرا: 2026-06-04 مفت دستیاب	Grok 4.20 Beta Grok 4.20 Beta none اجرا: 2026-03-12
اسکور	7.5	5.8
درجہ	#42	#107
اعتماد پذیری	9.7	دستیاب نہیں
تسلسل	8.8	9.6
درست ٹیسٹس
فی کوشش کامیابی کی شرح	69.8%	37.0%
غیر مستحکم ٹیسٹ	3	1
کل رنز	63	52
فی نتیجہ لاگت	0.000	1.510
کل لاگت	$0.177	$0.087
ان پٹ قیمت	$0.500 / 1M	$2.041 / 1M
آؤٹ پٹ قیمت	$2.500 / 1M	$2.041 / 1M
کل ان پٹ ٹوکنز	46,813	40,597
آؤٹ پٹ ٹوکنز	18,002	1,657
ریزننگ ٹوکنز	53,091	0
ردِعمل کا وقت (اوسط)	15.05s	1.19s
ردِعمل کا وقت (زیادہ سے زیادہ)	43.93s	6.48s
ردِعمل کا وقت (کل)	316.09s	21.43s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#42 Nemotron 3 Ultra 550b A55b

medium

No showcase result has been generated for this model yet.

Cost: $0.000
Time: -
Tokens: 0 tok

#107 Grok 4.20 Beta

none

Invalid SVG

Cost: $0.004
Time: 8.5s
Tokens: 1,672 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

اینٹی اے آئی چالیں	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		8.62s	780	835	1,485
Grok 4.20 Beta	4.0	8.4	16.7%	1		597ms	1,986	251	0

کوڈنگ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725
Grok 4.20 Beta	5.5	10.0	0.0%	0		1.14s	358	74	0

مشترکہ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		43.93s	17,574	1,040	3,590
Grok 4.20 Beta	3.0	10.0	0.0%	0		6.48s	17,673	282	0

ڈیٹا پارسنگ اور استخراج	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285
Grok 4.20 Beta	10.0	10.0	100.0%	0		601ms	7,749	197	0

ڈومین مخصوص	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	3.5	4.4	33.3%	2		24.90s	858	11,169	16,249
Grok 4.20 Beta	3.0	10.0	0.0%	0		611ms	1,746	160	0

عمومی ذہانت	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	3.7	9.5	0.0%	0		2.52s	360	70	235
Grok 4.20 Beta	5.0	10.0	0.0%	0		541ms	819	87	0

ہدایات کی پیروی	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		6.35s	765	182	1,243
Grok 4.20 Beta	6.3	10.0	50.0%	0		649ms	1,350	60	0

پہیلی حل کرنا	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	5.5	9.9	33.3%	0		3.54s	792	771	2,055
Grok 4.20 Beta	7.7	10.0	66.7%	0		586ms	1,671	357	0

ٹول کالنگ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		7.72s	9,781	304	984
Grok 4.20 Beta	10.0	10.0	100.0%	0		4.79s	7,245	189	0

معلومات عامہ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Nemotron 3 Ultra 550b A55b	3.0	10.0	0.0%	0		38.47s	228	304	8,240
Grok 4.20 Beta	-	-	-	-	-	-	-	-	-

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں