Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#440#440	Tev1 4B Experimentaldefault	1.0	Togethercomputer	$0.002	498ms
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 33,864 Tokeni za matokeo 96 Tokeni za hoja 0 Muda wa majibu (wastani) 498ms Muda wa majibu (jumla) 3.49s Muda wa majibu (upeo) 602ms Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 6.7 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#424#424	Decider V1.2default	2.6	Perplexity	$0.001	517ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 7 Uaminifu 9.4 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 48,363 Tokeni za matokeo 67 Tokeni za hoja 0 Muda wa majibu (wastani) 517ms Muda wa majibu (jumla) 6.20s Muda wa majibu (upeo) 776ms Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 5.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#419#419	Span-02default	2.8	Respan	$0.001	1.36s
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 6 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 70,626 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 1.36s Muda wa majibu (jumla) 16.37s Muda wa majibu (upeo) 5.71s Jibu lisilo sahihi: 6 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 5.8 Uandishi wa msimbo : 4.9 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 5.0 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#432#432	Decider Flash V1.2default	1.9	Perplexity	$0.001	462ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 49,176 Tokeni za matokeo 69 Tokeni za hoja 0 Muda wa majibu (wastani) 462ms Muda wa majibu (jumla) 5.55s Muda wa majibu (upeo) 661ms Jibu lisilo sahihi: 9 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 2.2 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#436#436	LFM2-24B-A2Bdefault	1.8	Liquid	$0.001	782ms
Tazama kadi ya modeli Jumla ya majaribio 16 Majaribio yenye makosa 14 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 11.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 10,771 Tokeni za matokeo 1,173 Tokeni za hoja 0 Muda wa majibu (wastani) 782ms Muda wa majibu (jumla) 10.94s Muda wa majibu (upeo) 3.15s Jibu lisilo sahihi: 9 Hitilafu ya API: 4 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.8 Mwito wa zana : 3.0 Maarifa ya jumla : 0.0
#441#441	Nimble v3 9Bdefault	0.8	Bespoke Labs	~$0.001	363ms
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 6 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 4.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 103,770 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 363ms Muda wa majibu (jumla) 2.54s Muda wa majibu (upeo) 1.24s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 2.0 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#96#96	Ling 3.1 Flashmedium	8.3	Inclusionai	$0.000	88.74s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 71.0% Majaribio yasiyo thabiti 3 Tokeni za ingizo 369,495 Tokeni za matokeo 172,852 Tokeni za hoja 476,002 Muda wa majibu (wastani) 88.74s Muda wa majibu (jumla) 2041.10s Muda wa majibu (upeo) 567.88s Hakuna jibu: 4 Jibu lisilo sahihi: 3 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 6.6 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#123#123	Ling 3.1 Flashhigh	7.9	Inclusionai	$0.000	87.39s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 69.6% Majaribio yasiyo thabiti 2 Tokeni za ingizo 324,691 Tokeni za matokeo 181,251 Tokeni za hoja 506,441 Muda wa majibu (wastani) 87.39s Muda wa majibu (jumla) 2010.08s Muda wa majibu (upeo) 665.85s Hakuna jibu: 4 Jibu lisilo sahihi: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#143#143	Space Bunny Alphahigh	7.5	Stealth	$0.000	29.38s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 4 Tokeni za ingizo 302,228 Tokeni za matokeo 181,271 Tokeni za hoja 0 Muda wa majibu (wastani) 29.38s Muda wa majibu (jumla) 675.79s Muda wa majibu (upeo) 234.56s Jibu lisilo sahihi: 10 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 6.2 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 8.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#201#201	Space Bunny Alphamax	6.7	Stealth	$0.000	36.24s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 5 Tokeni za ingizo 315,136 Tokeni za matokeo 219,014 Tokeni za hoja 0 Muda wa majibu (wastani) 36.24s Muda wa majibu (jumla) 833.43s Muda wa majibu (upeo) 320.00s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 2 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 5.7 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.3 Ufuataji wa maagizo : 5.9 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#212#212	Apodex 1.1 Minihigh	6.7	Apodex	$0.000	31.25s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.1% Majaribio yasiyo thabiti 9 Tokeni za ingizo 365,069 Tokeni za matokeo 133,336 Tokeni za hoja 344,133 Muda wa majibu (wastani) 31.25s Muda wa majibu (jumla) 718.67s Muda wa majibu (upeo) 114.61s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.5 Mchanganyiko : 4.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 10.0 Ufuataji wa maagizo : 8.0 Utatuzi wa mafumbo : 8.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#242#242	Dots 3 Note Previewhigh	6.4	Dots Studio	$0.000	70.48s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 7 Tokeni za ingizo 255,887 Tokeni za matokeo 154,879 Tokeni za hoja 603,518 Muda wa majibu (wastani) 70.48s Muda wa majibu (jumla) 1620.93s Muda wa majibu (upeo) 480.52s Jibu lisilo sahihi: 9 Hakuna jibu: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.4 Ufuataji wa maagizo : 8.3 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#243#243	Dots 3 Note Previewlow	6.4	Dots Studio	$0.000	66.13s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 58.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 260,850 Tokeni za matokeo 125,908 Tokeni za hoja 516,424 Muda wa majibu (wastani) 66.13s Muda wa majibu (jumla) 1520.96s Muda wa majibu (upeo) 417.36s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.0 Ufuataji wa maagizo : 7.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#252#252	Ling 3.1 Flashlow	6.3	Inclusionai	$0.000	85.22s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 271,890 Tokeni za matokeo 190,841 Tokeni za hoja 513,329 Muda wa majibu (wastani) 85.22s Muda wa majibu (jumla) 1960.12s Muda wa majibu (upeo) 432.81s Hakuna jibu: 4 Hakufuata maelekezo: 3 Jibu lisilo sahihi: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.6 Mchanganyiko : 6.6 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.9 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#254#254	Space Bunny Alphamedium	6.3	Stealth	$0.000	32.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 267,840 Tokeni za matokeo 192,115 Tokeni za hoja 0 Muda wa majibu (wastani) 32.88s Muda wa majibu (jumla) 756.28s Muda wa majibu (upeo) 197.32s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 5.2 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#259#259	Space Bunny Alphaxhigh	6.2	Stealth	$0.000	60.03s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 8 Tokeni za ingizo 363,310 Tokeni za matokeo 381,919 Tokeni za hoja 0 Muda wa majibu (wastani) 60.03s Muda wa majibu (jumla) 1380.67s Muda wa majibu (upeo) 459.99s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 6.6 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 5.6 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#268#268	Apodex 1.1 Minilow	6.1	Apodex	$0.000	33.68s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 6 Tokeni za ingizo 321,894 Tokeni za matokeo 139,334 Tokeni za hoja 369,481 Muda wa majibu (wastani) 33.68s Muda wa majibu (jumla) 774.73s Muda wa majibu (upeo) 163.05s Jibu lisilo sahihi: 9 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.1 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#274#274	Apodex 1.1 Minimedium	6.0	Apodex	$0.000	32.68s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 68.1% Majaribio yasiyo thabiti 9 Tokeni za ingizo 293,112 Tokeni za matokeo 152,376 Tokeni za hoja 357,890 Muda wa majibu (wastani) 32.68s Muda wa majibu (jumla) 751.72s Muda wa majibu (upeo) 115.57s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 3.4 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.3 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 5.1 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#297#297	Dots 3 Note Previewmedium	5.7	Dots Studio	$0.000	70.32s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 58.0% Majaribio yasiyo thabiti 9 Tokeni za ingizo 208,598 Tokeni za matokeo 120,583 Tokeni za hoja 590,044 Muda wa majibu (wastani) 70.32s Muda wa majibu (jumla) 1617.43s Muda wa majibu (upeo) 459.19s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muundo wa ziada: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 4.2 Mchanganyiko : 9.9 Uchanganuzi na uchimbaji wa data : 4.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.8 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#299#299	Space Bunny Alphalow	5.7	Stealth	$0.000	30.63s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.6% Majaribio yasiyo thabiti 10 Tokeni za ingizo 289,086 Tokeni za matokeo 194,450 Tokeni za hoja 0 Muda wa majibu (wastani) 30.63s Muda wa majibu (jumla) 704.47s Muda wa majibu (upeo) 340.88s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 5.6 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 4.4 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#308#308	Ling 3.1 Flashnone	5.5	Inclusionai	$0.000	15.75s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 5 Tokeni za ingizo 286,758 Tokeni za matokeo 85,777 Tokeni za hoja 0 Muda wa majibu (wastani) 15.75s Muda wa majibu (jumla) 362.23s Muda wa majibu (upeo) 90.95s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 5 Hakuna jibu: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 4.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#316#316	North Mini Codemedium	5.4	Cohere	$0.000	140.39s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 8.9 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 166,347 Tokeni za matokeo 423,884 Tokeni za hoja 1,394,387 Muda wa majibu (wastani) 140.39s Muda wa majibu (jumla) 3229.07s Muda wa majibu (upeo) 786.72s Jibu lisilo sahihi: 10 Muundo wa ziada: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 8.4 Uandishi wa msimbo : 4.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#339#339	Apodex 1.1 Minidefault	5.1	Apodex	$0.000	7.79s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 8 Tokeni za ingizo 465,127 Tokeni za matokeo 72,309 Tokeni za hoja 0 Muda wa majibu (wastani) 7.79s Muda wa majibu (jumla) 179.09s Muda wa majibu (upeo) 121.52s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 3.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.4 Ufuataji wa maagizo : 4.9 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#343#343	Dots 3 Note Previewdefault	5.0	Dots Studio	$0.000	5.36s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 225,907 Tokeni za matokeo 22,507 Tokeni za hoja 0 Muda wa majibu (wastani) 5.36s Muda wa majibu (jumla) 123.38s Muda wa majibu (upeo) 45.71s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 4.8 Utatuzi wa mafumbo : 3.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#360#360	North Mini Codedefault	4.7	Cohere	$0.000	29.47s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 8.9 Kiwango cha kupita kwa kila jaribio 17.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 177,989 Tokeni za matokeo 26,954 Tokeni za hoja 0 Muda wa majibu (wastani) 29.47s Muda wa majibu (jumla) 677.70s Muda wa majibu (upeo) 159.85s Jibu lisilo sahihi: 13 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow