Claude Haiku 5.5 (low) vs KAT Coder AIR V2.5 (high)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 5.2. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.077. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 15.23s, pass rates 76.8% vs 40.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-12

तुलना केलेली मॉडेल्स

क्रमांक: #64
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #309
एकूण आउटपुट टोकन्स: 114,654
प्रतिसाद वेळ (सरासरी): 15.23s
एकूण खर्च: $0.077

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while responding about 2.0x faster than KAT Coder AIR V2.5 (high).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	KAT Coder AIR V2.5 KAT Coder AIR V2.5 high प्रकाशन: 2026-07-14

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	KAT Coder AIR V2.5 KAT Coder AIR V2.5 high प्रकाशन: 2026-07-14
स्कोअर	8.6	5.2
क्रमांक	#64	#309
विश्वसनीयता	10.0	9.8
सुसंगतता	8.9	8.2
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	40.6%
अस्थिर चाचण्या	3	5
एकूण रन	69	69
प्रति निकाल खर्च	0.378	1.091
एकूण खर्च	$0.061	$0.077
इनपुट किंमत	$0.100 / 1M	$0.150 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.600 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	लागू नाही
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	50,423
आउटपुट टोकन्स	10,672	4,144
रिझनिंग टोकन्स	50,978	110,510
प्रतिसाद वेळ (सरासरी)	7.51s	15.23s
प्रतिसाद वेळ (कमाल)	44.43s	118.35s
प्रतिसाद वेळ (एकूण)	172.74s	350.26s
पॅरामीटर्स	~50B	~35B एकूण (~3B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#64 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#309 KAT Coder AIR V2.5

high

Reached the allocated time limit (300 seconds) without receiving showcase output.

खर्च: $0.000
वेळ: 300.0s
टोकन्स: 0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		1.10s	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
KAT Coder AIR V2.5	6.9	5.8	75.0%	2		2.49s	615	204	1,290

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
KAT Coder AIR V2.5	4.3	7.3	11.1%	1		39.07s	6,948	1,166	55,883

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
KAT Coder AIR V2.5	6.5	10.0	50.0%	0		74.48s	23,854	485	28,559

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
KAT Coder AIR V2.5	6.5	10.0	50.0%	0		3.59s	7,776	284	2,140

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		7.28s	724	1,101	7,738

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
KAT Coder AIR V2.5	5.1	10.0	0.0%	0		7.10s	516	179	539

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
KAT Coder AIR V2.5	9.8	10.0	100.0%	0		1.51s	699	90	675

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
KAT Coder AIR V2.5	3.5	4.4	33.3%	2		2.47s	696	285	1,576

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
KAT Coder AIR V2.5	10.0	10.0	100.0%	0		4.77s	8,391	330	1,082

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		21.72s	204	20	11,028

तुलना जोडी बदला

Ling 3.0 FlashnonevsKAT Coder AIR V2.5high Claude Haiku 5.5lowvsGrok 4.6high KAT Coder AIR V2.5highvsInkling Smalllowमोफत उपलब्ध KAT Coder AIR V2.5highvsMistral Small 4medium KAT Coder AIR V2.5highvsMistral Small 4none Claude Haiku 5.5lowvsDeepSeek V4.1 Flashmax Claude Haiku 5.5lowvsQwen3.7 Maxmedium Mercury 2.5lowvsKAT Coder AIR V2.5high KAT Coder AIR V2.5highvsMiMo-V2.5-Pronone Claude Haiku 5.5lowvsSeed 2.1 Turbomedium Claude Haiku 5.5lowvsMiMo-V2.6-Promedium KAT Coder AIR V2.5highvsQwen3.6 35B A3Bnone