Claude Haiku 5.5 (low) vs KAT Coder AIR V2.5 (default)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 4.4. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.070. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 11.96s, pass rates 76.8% vs 34.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-12

तुलना केलेली मॉडेल्स

क्रमांक: #64
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #356
एकूण आउटपुट टोकन्स: 97,752
प्रतिसाद वेळ (सरासरी): 11.96s
एकूण खर्च: $0.070

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while responding about 1.6x faster than KAT Coder AIR V2.5 (default).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	KAT Coder AIR V2.5 KAT Coder AIR V2.5 default प्रकाशन: 2026-07-14

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	KAT Coder AIR V2.5 KAT Coder AIR V2.5 default प्रकाशन: 2026-07-14
स्कोअर	8.6	4.4
क्रमांक	#64	#356
विश्वसनीयता	10.0	10.0
सुसंगतता	8.9	7.4
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	34.8%
अस्थिर चाचण्या	3	7
एकूण रन	69	69
प्रति निकाल खर्च	0.378	1.382
एकूण खर्च	$0.061	$0.070
इनपुट किंमत	$0.100 / 1M	$0.150 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.600 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	लागू नाही
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	69,376
आउटपुट टोकन्स	10,672	7,792
रिझनिंग टोकन्स	50,978	89,960
प्रतिसाद वेळ (सरासरी)	7.51s	11.96s
प्रतिसाद वेळ (कमाल)	44.43s	121.05s
प्रतिसाद वेळ (एकूण)	172.74s	275.18s
पॅरामीटर्स	~50B	~35B एकूण (~3B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#64 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#356 KAT Coder AIR V2.5

default

खर्च: $0.002
वेळ: 14.5s
टोकन्स: 2,619 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		1.07s	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
KAT Coder AIR V2.5	5.3	5.6	50.0%	2		2.68s	672	686	2,358

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
KAT Coder AIR V2.5	3.3	9.6	0.0%	0		14.31s	6,472	2,032	14,886

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
KAT Coder AIR V2.5	3.8	1.6	50.0%	2		73.00s	43,170	2,531	48,237

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
KAT Coder AIR V2.5	6.3	5.8	66.7%	1		2.66s	7,776	280	988

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		8.33s	780	1,399	10,258

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
KAT Coder AIR V2.5	5.0	10.0	0.0%	0		12.02s	516	141	515

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
KAT Coder AIR V2.5	9.9	10.0	100.0%	0		1.75s	699	90	768

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
KAT Coder AIR V2.5	2.9	4.4	22.2%	2		1.84s	696	284	971

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
KAT Coder AIR V2.5	10.0	10.0	100.0%	0		5.13s	8,391	330	1,230

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		17.96s	204	19	9,749

तुलना जोडी बदला

KAT Coder AIR V2.5defaultvsNemotron 3 Supernoneमोफत उपलब्ध Granite 4.2 8BnonevsKAT Coder AIR V2.5default Claude Haiku 5.5lowvsGrok 4.6high Claude Haiku 5.5lowvsDeepSeek V4.1 Flashmax Claude Haiku 5.5lowvsQwen3.7 Maxmedium Cobuddymediumमोफत उपलब्धvsKAT Coder AIR V2.5default Mercury 2nonevsKAT Coder AIR V2.5default Claude Haiku 5.5lowvsSeed 2.1 Turbomedium Claude Haiku 5.5lowvsMiMo-V2.6-Promedium Claude Haiku 5.5lowvsQwen3.8 27Bhighमोफत उपलब्ध Claude Haiku 5.5lowvsGPT-5.2medium KAT Coder AIR V2.5defaultvsNemotron 3.5 Lightninglowमोफत उपलब्ध