AI BENCHY Compare

DeepSeek: DeepSeek V4 Pro vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (medium) average score मध्ये पुढे आहे: 7.5 vs 7.2. DeepSeek V4 Pro चा benchmark खर्च कमी आहे: $0.034 vs $0.275. DeepSeek V4 Pro वेगवान आहे: 6.41s vs 12.95s, pass rates 52.4% vs 65.1%.

शिफारस केलेले मॉडेलDeepSeek V4 ProIts score stays close to the best score here (7.2 vs 7.5), while costing about 8.3x less than KAT-Coder-Pro V2.5 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक	DeepSeek V4 Pro DeepSeek V4 Pro none प्रकाशन: 2026-04-24	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium प्रकाशन: 2026-07-14

मेट्रिक	DeepSeek V4 Pro DeepSeek V4 Pro none प्रकाशन: 2026-04-24	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium प्रकाशन: 2026-07-14
स्कोअर	7.2	7.5
क्रमांक	#74	#60
विश्वसनीयता	9.9	10.0
सुसंगतता	8.8	7.7
बरोबर चाचण्या
प्रति प्रयत्न पास दर	52.4%	65.1%
अस्थिर चाचण्या	3	6
एकूण रन	63	63
प्रति निकाल खर्च	0.333	2.498
एकूण खर्च	$0.034	$0.275
इनपुट किंमत	$0.435 / 1M	$0.740 / 1M
आउटपुट किंमत	$0.870 / 1M	$2.960 / 1M
एकूण इनपुट टोकन्स	53,558	42,750
आउटपुट टोकन्स	11,424	2,098
रिझनिंग टोकन्स	0	80,027
प्रतिसाद वेळ (सरासरी)	6.41s	12.95s
प्रतिसाद वेळ (कमाल)	30.09s	81.45s
प्रतिसाद वेळ (एकूण)	134.66s	271.92s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 DeepSeek V4 Pro

none

अवैध SVG

खर्च: $0.000
वेळ: 300.0s
टोकन्स: 0 tok

#60 KAT-Coder-Pro V2.5

medium

खर्च: $0.009
वेळ: 25.6s
टोकन्स: 2,939 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	3.2	6.1	16.7%	2		4.02s	540	1,168	0
KAT-Coder-Pro V2.5	8.2	7.9	83.3%	1		3.90s	672	208	3,868

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	5.6	10.0	33.3%	0		13.38s	7,275	5,500	0
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		33.10s	7,893	416	33,658

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	9.5	10.0	100.0%	0		23.74s	27,529	2,235	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		14.50s	15,132	363	3,367

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	10.0	10.0	100.0%	0		4.61s	7,568	200	0
KAT-Coder-Pro V2.5	7.3	5.9	83.3%	1		4.70s	7,776	275	2,122

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	5.3	10.0	33.3%	0		3.72s	666	24	0
KAT-Coder-Pro V2.5	2.9	7.2	11.1%	1		29.03s	771	36	29,584

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	5.0	10.0	0.0%	0		2.05s	471	126	0
KAT-Coder-Pro V2.5	4.7	3.1	33.3%	1		2.35s	516	92	381

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	6.3	5.8	66.7%	1		4.12s	627	713	0
KAT-Coder-Pro V2.5	9.9	10.0	100.0%	0		2.58s	699	83	971

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	10.0	10.0	100.0%	0		3.61s	594	442	0
KAT-Coder-Pro V2.5	5.9	4.5	66.7%	2		3.20s	696	325	1,867

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	10.0	10.0	100.0%	0		7.40s	8,105	328	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		19.02s	8,391	282	1,010

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
DeepSeek V4 Pro	3.0	10.0	0.0%	0		5.76s	183	688	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.87s	204	18	3,199

झटपट तुलना

तुलना जोडी बदला

DeepSeek V4 PrononevsGemma 4 26B A4Bmediumमोफत उपलब्ध KAT-Coder-Pro V2.5mediumvsGPT-5.3 Chatnone DeepSeek V4 ProhighvsKAT-Coder-Pro V2.5medium DeepSeek V4 PrononevsStep 3.7 Flashhigh DeepSeek V4 PrononevsGLM 5.1medium DeepSeek V4 PrononevsLaguna XS 2.1mediumमोफत उपलब्ध Gemini 3 Flash PreviewlowvsKAT-Coder-Pro V2.5medium DeepSeek V4 PrononevsKimi K2.7 Codemedium KAT-Coder-Pro V2.5mediumvsGPT-5.6 Lunahigh KAT-Coder-Pro V2.5mediumvsStep 3.7 Flashlow DeepSeek V4 PrononevsGrok 4.20medium KAT-Coder-Pro V2.5mediumvsGPT-5.6 Terralow