Ember-1 vs Step 3.5 Flash (medium)

موازنہ کیے گئے ماڈلز

تجویز کردہ ماڈل Step 3.5 Flash (medium)

It has the best score here (5.4), while costing about 7.5x less than Ember-1.

میٹرک	Ember-1 Ember-1 none اجرا: 2026-09-28	Step 3.5 Flash Step 3.5 Flash medium اجرا: 2026-02-01

میٹرک	Ember-1 Ember-1 none اجرا: 2026-09-28	Step 3.5 Flash Step 3.5 Flash medium اجرا: 2026-02-01
اسکور	5.4	5.4
درجہ	#277	#276
اعتماد پذیری	8.8	10.0
تسلسل	8.6	8.3
کوششیں	69/69	66/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح	43.5%	49.3%
غیر مستحکم ٹیسٹ	4	3
کل رنز	69	66
فی نتیجہ لاگت	9.817	1.047
کل لاگت	$0.786	$0.105
ان پٹ قیمت	$3.000 / 1M	$0.100 / 1M
آؤٹ پٹ قیمت	$15.000 / 1M	$0.300 / 1M
کل ان پٹ ٹوکنز	202,617	139,086
آؤٹ پٹ ٹوکنز	11,832	193,584
ریزننگ ٹوکنز	0	413,546
ردِعمل کا وقت (اوسط)	22.65s	190.48s
ردِعمل کا وقت (زیادہ سے زیادہ)	93.12s	1597.85s
ردِعمل کا وقت (کل)	520.91s	3238.23s
پیرامیٹرز	~2.8T کل (~104B فعال)	196B کل (11B فعال)
دستیابی	بند ماخذ	کھلا ماخذ

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

medium

زمرہ:

خودمختار ایجنٹ کے کام	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	6.1	3.1	66.7%	1		92.87s	175,191	9,168	0
Step 3.5 Flash	2.8	1.6	33.3%	1		172.16s	73,370	4,160	34,434

اینٹی اے آئی چالیں	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	5.2	7.9	41.7%	1		22.37s	796	867	0
Step 3.5 Flash	10.0	10.0	100.0%	0		40.57s	694	20,391	24,176

کوڈنگ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	5.5	10.0	33.3%	0		1.94s	7,485	393	0
Step 3.5 Flash	2.4	5.2	0.0%	0		258.38s	2,211	13,207	22,429

مشترکہ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	3.0	10.0	0.0%	0		49.01s	12,162	327	0
Step 3.5 Flash	6.5	10.0	50.0%	0		813.71s	44,914	18,150	111,004

ڈیٹا پارسنگ اور استخراج	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	6.4	5.9	66.7%	1		35.25s	4,017	161	0
Step 3.5 Flash	10.0	10.0	100.0%	0		15.01s	7,368	600	13,886

ڈومین مخصوص	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	5.3	10.0	33.3%	0		21.61s	804	68	0
Step 3.5 Flash	3.5	4.4	33.3%	2		311.60s	682	126,213	175,555

عمومی ذہانت	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	5.0	10.0	0.0%	0		2.28s	540	160	0
Step 3.5 Flash	5.5	10.0	0.0%	0		22.39s	509	240	3,506

ہدایات کی پیروی	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	6.4	5.8	66.7%	1		31.00s	509	81	0
Step 3.5 Flash	8.3	10.0	50.0%	0		4.78s	705	2,364	3,521

پہیلی حل کرنا	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	10.0	10.0	100.0%	0		2.54s	840	569	0
Step 3.5 Flash	5.3	10.0	33.3%	0		7.22s	711	5,630	10,861

ٹول کالنگ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	3.0	10.0	0.0%	0		26.44s	0	0	0
Step 3.5 Flash	10.0	10.0	100.0%	0		11.91s	7,701	275	3,802

معلومات عامہ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Ember-1	3.0	10.0	0.0%	0		1.05s	273	38	0
Step 3.5 Flash	3.0	10.0	0.0%	0		108.45s	221	2,354	10,372

موازنہ کی جوڑی تبدیل کریں