Google: Gemini 3.5 Flash-Lite vs StepFun: Step 3.7 Flash

Step 3.7 Flash (high) average score میں آگے ہے: 6.9 vs 6.7. Gemini 3.5 Flash-Lite (low) کی benchmark لاگت کم ہے: $0.145 vs $1.207. Gemini 3.5 Flash-Lite (low) تیز ہے: 2.25s vs 64.68s، pass rates 66.7% vs 63.6%.

تجویز کردہ ماڈلGemini 3.5 Flash-Lite (low)Its score stays close to the best score here (6.7 vs 6.9), while costing about 8.4x less than Step 3.7 Flash (high).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-21

میٹرک	Gemini 3.5 Flash-Lite Gemini 3.5 Flash-Lite low اجرا: 2026-07-21	Step 3.7 Flash Step 3.7 Flash high اجرا: 2026-05-29

میٹرک	Gemini 3.5 Flash-Lite Gemini 3.5 Flash-Lite low اجرا: 2026-07-21	Step 3.7 Flash Step 3.7 Flash high اجرا: 2026-05-29
اسکور	6.7	6.9
درجہ	#95	#90
اعتماد پذیری	10.0	10.0
تسلسل	8.2	8.0
درست ٹیسٹس
فی کوشش کامیابی کی شرح	66.7%	63.6%
غیر مستحکم ٹیسٹ	5	5
کل رنز	66	66
فی نتیجہ لاگت	1.201	10.973
کل لاگت	$0.145	$1.207
ان پٹ قیمت	$0.300 / 1M	$0.200 / 1M
آؤٹ پٹ قیمت	$2.500 / 1M	$1.150 / 1M
کل ان پٹ ٹوکنز	144,622	98,691
آؤٹ پٹ ٹوکنز	15,302	1,032,395
ریزننگ ٹوکنز	24,971	0
ردِعمل کا وقت (اوسط)	2.25s	64.68s
ردِعمل کا وقت (زیادہ سے زیادہ)	13.50s	364.99s
ردِعمل کا وقت (کل)	49.58s	1423.01s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#95 Gemini 3.5 Flash-Lite

low

لاگت: $0.008
وقت: 7.7s
ٹوکنز: 3,056 tok

#90 Step 3.7 Flash

high

لاگت: $0.007
وقت: 63.6s
ٹوکنز: 6,030 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

زمرہ:

اینٹی اے آئی چالیں	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		1.30s	516	278	4,147
Step 3.7 Flash	10.0	10.0	100.0%	0		13.40s	696	42,656	0

کوڈنگ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	4.1	7.9	11.1%	1		672ms	8,136	463	0
Step 3.7 Flash	4.0	6.0	22.2%	1		206.21s	6,057	327,340	0

مشترکہ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	6.3	5.8	66.7%	1		8.96s	120,017	13,542	5,573
Step 3.7 Flash	8.7	6.9	83.3%	1		41.23s	73,938	49,842	0

ڈیٹا پارسنگ اور استخراج	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		657ms	7,269	287	0
Step 3.7 Flash	10.0	10.0	100.0%	0		14.72s	7,368	23,113	0

ڈومین مخصوص	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	3.6	7.2	22.2%	1		3.63s	651	17	7,901
Step 3.7 Flash	4.1	4.4	44.5%	2		149.64s	783	410,502	0

عمومی ذہانت	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	6.1	3.1	66.7%	1		1.71s	492	92	1,079
Step 3.7 Flash	5.5	10.0	0.0%	0		4.17s	510	2,862	0

ہدایات کی پیروی	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	9.8	10.0	100.0%	0		869ms	627	70	1,093
Step 3.7 Flash	9.8	10.0	100.0%	0		1.52s	705	2,010	0

پہیلی حل کرنا	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	7.8	10.0	66.7%	0		1.22s	576	215	2,121
Step 3.7 Flash	5.3	7.2	44.4%	1		10.22s	711	25,422	0

ٹول کالنگ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	9.8	10.0	100.0%	0		1.76s	6,176	328	340
Step 3.7 Flash	10.0	10.0	100.0%	0		2.79s	7,701	1,172	0

معلومات عامہ	اسکور	تسلسل	فی کوشش کامیابی کی شرح	غیر مستحکم ٹیسٹ	درست ٹیسٹس	ردِعمل کا وقت (اوسط)	ان پٹ ٹوکنز	آؤٹ پٹ ٹوکنز	ریزننگ ٹوکنز
Gemini 3.5 Flash-Lite	4.7	1.6	66.7%	1		3.38s	162	10	2,717
Step 3.7 Flash	3.0	10.0	0.0%	0		149.34s	222	147,476	0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں

GPT-5.5nonevsStep 3.7 Flashhigh Gemini 3.5 Flash-LitelowvsKAT-Coder-Pro V2.5none Qwen3.6 FlashmediumvsStep 3.7 Flashhigh Gemini 3.5 Flash-LitelowvsQwen3.6 35B A3Bmedium Step 3.7 FlashhighvsMiMo-V2.5-Promedium Gemini 3.5 FlashminimalvsStep 3.7 Flashhigh GPT-5.6 SolnonevsStep 3.7 Flashhigh DeepSeek V4 PrononevsStep 3.7 Flashhigh KAT-Coder-Pro V2.5mediumvsStep 3.7 Flashhigh Gemini 3.5 Flash-LitelowvsGLM 5.2none Gemini 3.5 Flash-LitelowvsLongCat 2.0high Seed-2.0-MinimediumvsStep 3.7 Flashhigh