Claude Haiku 5.5 (low) vs LFM3-1.7B (default)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 4.1. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.084. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 16.99s, pass rates 76.8% vs 34.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-10

तुलना केलेली मॉडेल्स

क्रमांक: #94
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #430
एकूण आउटपुट टोकन्स: 329,997
प्रतिसाद वेळ (सरासरी): 16.99s
एकूण खर्च: $0.084

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while responding about 2.3x faster than LFM3-1.7B (default).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	LFM3-1.7B LFM3-1.7B default प्रकाशन: 2026-11-06 मोफत उपलब्ध

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	LFM3-1.7B LFM3-1.7B default प्रकाशन: 2026-11-06 मोफत उपलब्ध
स्कोअर	8.6	4.1
क्रमांक	#94	#430
विश्वसनीयता	10.0	10.0
सुसंगतता	8.9	8.2
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	34.8%
अस्थिर चाचण्या	3	5
एकूण रन	69	69
प्रति निकाल खर्च	0.378	1.672
एकूण खर्च	$0.061	$0.084
इनपुट किंमत	$0.100 / 1M	$0.080 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.200 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.020 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	219,830
आउटपुट टोकन्स	10,672	5,711
रिझनिंग टोकन्स	50,978	324,286
प्रतिसाद वेळ (सरासरी)	7.51s	16.99s
प्रतिसाद वेळ (कमाल)	44.43s	56.52s
प्रतिसाद वेळ (एकूण)	172.74s	390.77s
पॅरामीटर्स	~50B	1.7B
उपलब्धता	बंद स्रोत	वेट्स उपलब्ध

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#94 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#430 LiquidAI: LFM3-1.7B

default

OpenRouter returned no showcase content (finish_reason: length).

खर्च: $0.002
वेळ: 23.3s
टोकन्स: 8,320 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
LFM3-1.7B	3.4	9.6	0.0%	0		56.52s	149,079	749	32,217

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
LFM3-1.7B	7.0	7.9	66.7%	1		5.98s	672	2,226	16,677

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
LFM3-1.7B	2.9	10.0	0.0%	0		26.48s	7,461	0	73,728

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
LFM3-1.7B	6.5	10.0	50.0%	0		41.31s	40,494	579	73,968

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
LFM3-1.7B	2.9	5.8	16.7%	1		8.32s	7,332	227	14,678

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
LFM3-1.7B	5.9	7.2	55.6%	1		12.39s	780	20	33,410

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
LFM3-1.7B	4.2	9.9	0.0%	0		7.07s	516	221	6,343

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
LFM3-1.7B	6.3	10.0	50.0%	0		6.64s	699	66	10,603

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
LFM3-1.7B	4.2	4.4	44.5%	2		5.33s	717	1,102	13,671

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
LFM3-1.7B	3.0	10.0	0.0%	0		36.00s	11,879	514	27,467

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
LFM3-1.7B	3.0	10.0	0.0%	0		22.16s	201	7	21,524

तुलना जोडी बदला