Gemini 3.7 Flash (low) vs KAT-Coder-Pro V2.5 (high)

Gemini 3.7 Flash (low) average score मध्ये पुढे आहे: 9.4 vs 6.5. Gemini 3.7 Flash (low) चा benchmark खर्च कमी आहे: $0.183 vs $0.506. Gemini 3.7 Flash (low) वेगवान आहे: 6.24s vs 21.21s, pass rates 95.7% vs 60.9%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-12

तुलना केलेली मॉडेल्स

क्रमांक: #25
एकूण आउटपुट टोकन्स: 38,453
प्रतिसाद वेळ (सरासरी): 6.24s
एकूण खर्च: $0.183

क्रमांक: #211
एकूण आउटपुट टोकन्स: 144,359
प्रतिसाद वेळ (सरासरी): 21.21s
एकूण खर्च: $0.506

शिफारस केलेले मॉडेल Gemini 3.7 Flash (low)

It has the best score here (9.4), while costing about 2.8x less than KAT-Coder-Pro V2.5 (high).

तपशीलवार तुलना

मेट्रिक	Gemini 3.7 Flash Gemini 3.7 Flash low प्रकाशन: 2026-08-14	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high प्रकाशन: 2026-07-14

मेट्रिक	Gemini 3.7 Flash Gemini 3.7 Flash low प्रकाशन: 2026-08-14	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high प्रकाशन: 2026-07-14
स्कोअर	9.4	6.5
क्रमांक	#25	#211
विश्वसनीयता	10.0	10.0
सुसंगतता	9.3	7.9
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	95.7%	60.9%
अस्थिर चाचण्या	2	6
एकूण रन	69	69
प्रति निकाल खर्च	0.868	4.599
एकूण खर्च	$0.183	$0.506
इनपुट किंमत	$0.750 / 1M	$0.740 / 1M
आउटपुट किंमत	$3.750 / 1M	$2.960 / 1M
कॅश वाचण्याची किंमत	$0.075 / 1M	$0.150 / 1M
कॅश लिहिण्याची किंमत	$0.042 / 1M	लागू नाही
एकूण इनपुट टोकन्स	188,519	106,085
आउटपुट टोकन्स	7,694	9,071
रिझनिंग टोकन्स	30,759	135,288
प्रतिसाद वेळ (सरासरी)	6.24s	21.21s
प्रतिसाद वेळ (कमाल)	58.75s	199.97s
प्रतिसाद वेळ (एकूण)	143.56s	487.83s
पॅरामीटर्स	~500B एकूण (~20B सक्रिय)	~700B एकूण (~72B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#25 Gemini 3.7 Flash

low

खर्च: $0.010
वेळ: 23.5s
टोकन्स: 5,210 tok

#211 KAT-Coder-Pro V2.5

high

खर्च: $0.009
वेळ: 26.4s
टोकन्स: 3,117 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.52s	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398
KAT-Coder-Pro V2.5	7.0	8.0	66.7%	1		3.17s	672	447	2,716

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508
KAT-Coder-Pro V2.5	6.4	7.9	44.4%	1		22.00s	7,893	422	20,461

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108
KAT-Coder-Pro V2.5	7.3	5.8	83.3%	1		106.70s	78,458	6,956	60,306

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.13s	7,776	278	1,960

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029
KAT-Coder-Pro V2.5	2.9	4.4	22.2%	2		44.66s	780	33	43,896

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043
KAT-Coder-Pro V2.5	5.1	10.0	0.0%	0		3.27s	516	139	647

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778
KAT-Coder-Pro V2.5	9.9	10.0	100.0%	0		2.67s	699	84	976

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.38s	696	428	1,936

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		28.04s	8,391	268	896

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		5.22s	204	16	1,494

तुलना जोडी बदला