नेविगेशन
Advertise here

Claude Haiku 5.5 (low) vs Gemma 4 26B A4B (medium)

Claude Haiku 5.5 (low) average score में आगे है: 8.6 vs 7.3. Claude Haiku 5.5 (low) की benchmark लागत कम है: $0.061 vs $0.101. Claude Haiku 5.5 (low) तेज है: 7.51s vs 105.03s, pass rates 76.8% vs 71.0%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-11-17

तुलना किए गए मॉडल

रैंक
#115
कुल आउटपुट टोकन
61,650
प्रतिक्रिया समय (औसत)
7.51s
कुल लागत
$0.061
रैंक
#211
कुल आउटपुट टोकन
269,351
प्रतिक्रिया समय (औसत)
105.03s
कुल लागत
$0.101
अनुशंसित मॉडल Claude Haiku 5.5 (low)

It has the best score here (8.6), while costing about 1.7x less than Gemma 4 26B A4B (medium).

विस्तृत तुलना

मेट्रिक Claude Haiku 5.5 Claude Haiku 5.5 low रिलीज़: 2026-10-07 Gemma 4 26B A4B Gemma 4 26B A4B medium रिलीज़: 2026-04-03 निःशुल्क उपलब्ध
स्कोर 8.6 7.3
रैंक #115 #211
विश्वसनीयता 10.0 10.0
संगति 8.9 9.6
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 76.8% 71.0%
अस्थिर टेस्ट 3 1
कुल रन 69 69
प्रति परिणाम लागत 0.378 0.679
कुल लागत $0.061 $0.101
इनपुट कीमत $0.100 / 1M $0.090 / 1M
आउटपुट कीमत $0.500 / 1M $0.300 / 1M
कैश पढ़ने की कीमत $0.010 / 1M $0.050 / 1M
कैश लिखने की कीमत $0.125 / 1M लागू नहीं
कुल इनपुट टोकन 296,301 224,367
आउटपुट टोकन 10,672 27,095
रीजनिंग टोकन 50,978 242,256
प्रतिक्रिया समय (औसत) 7.51s 105.03s
प्रतिक्रिया समय (अधिकतम) 44.43s 912.19s
प्रतिक्रिया समय (कुल) 172.74s 2310.63s
पैरामीटर ~50B 25.2B कुल (3.8B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 Claude Haiku 5.5

low
लागत
$0.001
समय
7.4s
टोकन
1,851 tok

#211 Gemma 4 26B A4B

medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
लागत
$0.000
समय
300.0s
टोकन
0 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Claude Haiku 5.5 7.9 7.5 77.8% 1 7.30s 10,608 531 11,618
Gemma 4 26B A4B 2.9 10.0 0.0% 0 272.54s 5,062 14,838 44,567

तुलना जोड़ी बदलें