Gemini 3.5 Flash vs KAT-Coder-Pro V2.5 (default)

Gemini 3.5 Flash average score मध्ये पुढे आहे: 6.1 vs 6.1. KAT-Coder-Pro V2.5 (default) चा benchmark खर्च कमी आहे: $0.742 vs $1.752. Gemini 3.5 Flash वेगवान आहे: 14.13s vs 24.96s, pass rates 68.1% vs 68.1%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-06

तुलना केलेली मॉडेल्स

क्रमांक: #239
एकूण आउटपुट टोकन्स: 153,595
प्रतिसाद वेळ (सरासरी): 14.13s
एकूण खर्च: $1.752

क्रमांक: #245
एकूण आउटपुट टोकन्स: 139,572
प्रतिसाद वेळ (सरासरी): 24.96s
एकूण खर्च: $0.742

शिफारस केलेले मॉडेल KAT-Coder-Pro V2.5 (default)

Its score stays close to the best score here (6.1 vs 6.1), while costing about 2.4x less than Gemini 3.5 Flash.

तपशीलवार तुलना

मेट्रिक	Gemini 3.5 Flash Gemini 3.5 Flash none प्रकाशन: 2026-05-19	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default प्रकाशन: 2026-07-14

मेट्रिक	Gemini 3.5 Flash Gemini 3.5 Flash none प्रकाशन: 2026-05-19	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default प्रकाशन: 2026-07-14
स्कोअर	6.1	6.1
क्रमांक	#239	#245
विश्वसनीयता	10.0	10.0
सुसंगतता	8.6	7.1
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	68.1%	68.1%
अस्थिर चाचण्या	4	8
एकूण रन	69	69
प्रति निकाल खर्च	12.511	4.419
एकूण खर्च	$1.752	$0.742
इनपुट किंमत	$1.500 / 1M	$0.740 / 1M
आउटपुट किंमत	$9.000 / 1M	$2.960 / 1M
कॅश वाचण्याची किंमत	$0.150 / 1M	$0.150 / 1M
कॅश लिहिण्याची किंमत	$0.084 / 1M	लागू नाही
एकूण इनपुट टोकन्स	246,061	98,508
आउटपुट टोकन्स	3,828	8,088
रिझनिंग टोकन्स	149,767	131,484
प्रतिसाद वेळ (सरासरी)	14.13s	24.96s
प्रतिसाद वेळ (कमाल)	85.26s	335.41s
प्रतिसाद वेळ (एकूण)	268.55s	574.12s
पॅरामीटर्स	~500B एकूण (~20B सक्रिय)	~700B एकूण (~72B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#239 Gemini 3.5 Flash

none

खर्च: $0.225
वेळ: 125.5s
टोकन्स: 25,004 tok

#245 KAT-Coder-Pro V2.5

default

खर्च: $0.010
वेळ: 29.0s
टोकन्स: 3,439 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	2.8	1.6	33.3%	1		85.26s	232,209	2,528	31,967
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.90s	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.53s	492	174	4,927
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	222	3,776

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	8.8	7.8	88.9%	1		34.69s	8,122	456	75,471
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	451	21,989

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
KAT-Coder-Pro V2.5	4.1	5.0	33.3%	1		183.08s	70,881	6,356	71,533

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	6.5	10.0	50.0%	0		8.10s	2,781	177	5,718
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	288	2,073

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	5.3	7.2	44.4%	1		12.18s	642	12	19,480
KAT-Coder-Pro V2.5	4.1	4.4	44.5%	2		24.90s	780	34	24,649

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.46s	486	120	1,500
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	111	956

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	9.8	10.0	100.0%	0		3.38s	615	70	3,858
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	84	1,000

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.13s	558	279	4,361
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	256	1,673

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	268	835

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	2.8	1.6	33.3%	1		4.87s	156	12	2,485
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	18	3,000

झटपट तुलना

तुलना जोडी बदला

Granite 4.2 8BmediumvsKAT-Coder-Pro V2.5default Apodex 1.1 Minimediumमोफत उपलब्धvsKAT-Coder-Pro V2.5default Trinity Large ThinkingmediumvsGemini 3.5 Flashnone KAT-Coder-Pro V2.5defaultvsQwen3.5 Plus 2026-04-20none KAT-Coder-Pro V2.5defaultvsInklingnoneमोफत उपलब्ध Apodex 1.1 Minilowमोफत उपलब्धvsKAT-Coder-Pro V2.5default Apodex 1.1 Minilowमोफत उपलब्धvsGemini 3.5 Flashnone Trinity Large ThinkingmediumvsKAT-Coder-Pro V2.5default Gemini 3.5 FlashnonevsGranite 4.2 8Bmedium Claude Fable 5.1lowvsGemini 3.5 Flashnone Apodex 1.1 Minimediumमोफत उपलब्धvsGemini 3.5 Flashnone KAT-Coder-Pro V2.5defaultvsGLM 5.3 FlashXlow