Seed-2.0-Lite vs KAT-Coder-Pro V2.5 (default)

KAT-Coder-Pro V2.5 (default) average score मध्ये पुढे आहे: 6.1 vs 6.0. Seed-2.0-Lite चा benchmark खर्च कमी आहे: $0.114 vs $0.742. Seed-2.0-Lite वेगवान आहे: 7.49s vs 24.96s, pass rates 39.1% vs 68.1%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-09

तुलना केलेली मॉडेल्स

क्रमांक: #258
एकूण आउटपुट टोकन्स: 17,558
प्रतिसाद वेळ (सरासरी): 7.49s
एकूण खर्च: $0.114

क्रमांक: #252
एकूण आउटपुट टोकन्स: 139,572
प्रतिसाद वेळ (सरासरी): 24.96s
एकूण खर्च: $0.742

शिफारस केलेले मॉडेल Seed-2.0-Lite

Its score stays close to the best score here (6.0 vs 6.1), while costing about 6.5x less than KAT-Coder-Pro V2.5 (default).

तपशीलवार तुलना

मेट्रिक	Seed-2.0-Lite Seed-2.0-Lite none प्रकाशन: 2026-02-14	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default प्रकाशन: 2026-07-14

मेट्रिक	Seed-2.0-Lite Seed-2.0-Lite none प्रकाशन: 2026-02-14	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default प्रकाशन: 2026-07-14
स्कोअर	6.0	6.1
क्रमांक	#258	#252
विश्वसनीयता	10.0	10.0
सुसंगतता	8.9	7.1
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	39.1%	68.1%
अस्थिर चाचण्या	3	8
एकूण रन	69	69
प्रति निकाल खर्च	1.421	4.419
एकूण खर्च	$0.114	$0.742
इनपुट किंमत	$0.250 / 1M	$0.740 / 1M
आउटपुट किंमत	$2.000 / 1M	$2.960 / 1M
कॅश वाचण्याची किंमत	लागू नाही	$0.150 / 1M
कॅश लिहिण्याची किंमत	लागू नाही	लागू नाही
एकूण इनपुट टोकन्स	314,113	98,508
आउटपुट टोकन्स	17,558	8,088
रिझनिंग टोकन्स	0	131,484
प्रतिसाद वेळ (सरासरी)	7.49s	24.96s
प्रतिसाद वेळ (कमाल)	75.99s	335.41s
प्रतिसाद वेळ (एकूण)	172.19s	574.12s
पॅरामीटर्स	~200B एकूण (~20B सक्रिय)	~700B एकूण (~72B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#258 Seed-2.0-Lite

none

खर्च: $0.005
वेळ: 83.8s
टोकन्स: 2,311 tok

#252 KAT-Coder-Pro V2.5

default

खर्च: $0.010
वेळ: 29.0s
टोकन्स: 3,439 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	5.0	10.0	0.0%	0		75.99s	171,907	2,814	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.90s	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	3.0	5.9	16.7%	2		2.43s	894	709	0
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	222	3,776

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	5.6	10.0	33.3%	0		2.83s	8,215	410	0
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	451	21,989

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	3.0	10.0	0.0%	0		25.58s	111,839	11,985	0
KAT-Coder-Pro V2.5	4.1	5.0	33.3%	1		183.08s	70,881	6,356	71,533

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.82s	8,538	246	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	288	2,073

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	3.0	10.0	0.0%	0		1.12s	948	15	0
KAT-Coder-Pro V2.5	4.1	4.4	44.5%	2		24.90s	780	34	24,649

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.45s	570	294	0
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	111	956

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.06s	810	73	0
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	84	1,000

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	5.3	7.2	44.4%	1		2.78s	858	709	0
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	256	1,673

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.94s	9,270	292	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	268	835

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Seed-2.0-Lite	3.0	10.0	0.0%	0		1.96s	264	11	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	18	3,000

तुलना जोडी बदला