North Mini Code (medium) vs Gemma 4 26B A4B

Gemma 4 26B A4B average score मध्ये पुढे आहे: 5.5 vs 5.4. North Mini Code (medium) चा benchmark खर्च कमी आहे: $0.000 vs $0.026. Gemma 4 26B A4B वेगवान आहे: 10.55s vs 140.39s, pass rates 42.0% vs 42.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक: #273
एकूण आउटपुट टोकन्स: 1,818,271
प्रतिसाद वेळ (सरासरी): 140.39s
एकूण खर्च: $0.000

क्रमांक: #268
एकूण आउटपुट टोकन्स: 17,306
प्रतिसाद वेळ (सरासरी): 10.55s
एकूण खर्च: $0.026

शिफारस केलेले मॉडेल Gemma 4 26B A4B

It has the best score here (5.5), while responding about 13.3x faster than North Mini Code (medium).

तपशीलवार तुलना

मेट्रिक	North Mini Code North Mini Code medium प्रकाशन: 2026-06-18 मोफत उपलब्ध	Gemma 4 26B A4B Gemma 4 26B A4B none प्रकाशन: 2026-04-03 मोफत उपलब्ध

मेट्रिक	North Mini Code North Mini Code medium प्रकाशन: 2026-06-18 मोफत उपलब्ध	Gemma 4 26B A4B Gemma 4 26B A4B none प्रकाशन: 2026-04-03 मोफत उपलब्ध
स्कोअर	5.4	5.5
क्रमांक	#273	#268
विश्वसनीयता	8.9	10.0
सुसंगतता	8.6	9.6
प्रयत्न	61/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	42.0%	42.0%
अस्थिर चाचण्या	4	1
एकूण रन	61	69
प्रति निकाल खर्च	0.000	0.339
एकूण खर्च	$0.000	$0.026
इनपुट किंमत	$0.000 / 1M	$0.077 / 1M
आउटपुट किंमत	$0.000 / 1M	$0.255 / 1M
एकूण इनपुट टोकन्स	166,347	280,126
आउटपुट टोकन्स	423,884	17,306
रिझनिंग टोकन्स	1,394,387	0
प्रतिसाद वेळ (सरासरी)	140.39s	10.55s
प्रतिसाद वेळ (कमाल)	786.72s	75.76s
प्रतिसाद वेळ (एकूण)	3229.07s	242.57s
पॅरामीटर्स	30B एकूण (3B सक्रिय)	25.2B एकूण (3.8B सक्रिय)
उपलब्धता	मुक्त स्रोत	मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#273 North Mini Code

medium

खर्च: $0.000
वेळ: 51.8s
टोकन्स: 12,460 tok

#268 Gemma 4 26B A4B

none

खर्च: $0.001
वेळ: 39.5s
टोकन्स: 790 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	3.9	9.6	0.0%	0		105.20s	84,605	0	53,480
Gemma 4 26B A4B	5.0	10.0	0.0%	0		75.76s	148,869	1,525	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535
Gemma 4 26B A4B	8.3	10.0	75.0%	0		1.28s	852	230	0

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569
Gemma 4 26B A4B	3.7	7.2	22.2%	1		4.16s	7,736	476	0

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	2.9	5.8	16.7%	1		554.89s	63,682	0	472,040
Gemma 4 26B A4B	3.0	10.0	0.0%	0		37.23s	104,894	14,266	0

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659
Gemma 4 26B A4B	10.0	10.0	100.0%	0		1.70s	8,352	285	0

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	2.9	7.2	11.1%	1		107.19s	550	7,595	102,957
Gemma 4 26B A4B	5.3	10.0	33.3%	0		2.10s	878	27	0

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635
Gemma 4 26B A4B	4.0	10.0	0.0%	0		3.54s	576	85	0

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339
Gemma 4 26B A4B	6.3	10.0	50.0%	0		690ms	795	75	0

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485
Gemma 4 26B A4B	6.2	10.0	33.3%	0		744ms	828	114	0

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563
Gemma 4 26B A4B	10.0	10.0	100.0%	0		57.10s	6,123	210	0

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125
Gemma 4 26B A4B	3.0	10.0	0.0%	0		778ms	223	13	0

झटपट तुलना

तुलना जोडी बदला