Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#162#162	LongCat 2.0high	7.3	Meituan	$0.778 ↑	151.67s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 275,080 Tokeni za matokeo 32,447 Tokeni za hoja 372,188 Muda wa majibu (wastani) 151.67s Muda wa majibu (jumla) 3488.43s Muda wa majibu (upeo) 941.66s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muda umeisha: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.9 Uandishi wa msimbo : 7.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 3.6 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#165#165	Qwen3.5-27Bnone	7.2	Qwen	$0.116	9.98s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 2 Tokeni za ingizo 283,977 Tokeni za matokeo 36,422 Tokeni za hoja 0 Muda wa majibu (wastani) 9.98s Muda wa majibu (jumla) 229.52s Muda wa majibu (upeo) 124.53s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#185#185	Step 5 Previewhigh	7.0	Stepfun	$4.513	154.41s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 9.5 Kiwango cha kupita kwa kila jaribio 52.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 243,381 Tokeni za matokeo 1,581,325 Tokeni za hoja 0 Muda wa majibu (wastani) 154.41s Muda wa majibu (jumla) 3551.40s Muda wa majibu (upeo) 455.72s Hakuna jibu: 7 Jibu lisilo sahihi: 3 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.4 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 5.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#194#194	Claude Sonnet 5.5low	6.9	Anthropic	$0.909	7.46s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 46.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 291,853 Tokeni za matokeo 24,116 Tokeni za hoja 8,327 Muda wa majibu (wastani) 7.46s Muda wa majibu (jumla) 171.47s Muda wa majibu (upeo) 46.61s Muundo wa ziada: 5 Hakufuata maelekezo: 5 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Jibu lisilo sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 3.2 Mchanganyiko : 7.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#216#216	Qwen3.7 Flashmedium	6.6	Qwen	$0.076	51.80s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.3% Majaribio yasiyo thabiti 8 Tokeni za ingizo 300,394 Tokeni za matokeo 14,081 Tokeni za hoja 500,844 Muda wa majibu (wastani) 51.80s Muda wa majibu (jumla) 1191.42s Muda wa majibu (upeo) 593.64s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 5.8 Utatuzi wa mafumbo : 7.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#217#217	LongCat 2.0low	6.6	Meituan	$0.630 ↑	115.00s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 262,387 Tokeni za matokeo 7,344 Tokeni za hoja 338,881 Muda wa majibu (wastani) 115.00s Muda wa majibu (jumla) 2645.11s Muda wa majibu (upeo) 560.39s Jibu lisilo sahihi: 8 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.6 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#218#218	Mercury 2medium	6.6	Inception	$0.121	4.40s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 189,300 Tokeni za matokeo 10,854 Tokeni za hoja 86,089 Muda wa majibu (wastani) 4.40s Muda wa majibu (jumla) 96.81s Muda wa majibu (upeo) 34.92s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#237#237	Kimi K2.5medium	6.4	Moonshot AI	$0.841 ↑	125.76s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 8 Tokeni za ingizo 292,271 Tokeni za matokeo 55,025 Tokeni za hoja 186,071 Muda wa majibu (wastani) 125.76s Muda wa majibu (jumla) 2137.84s Muda wa majibu (upeo) 566.79s Jibu lisilo sahihi: 5 Muda umeisha: 3 Hakufuata maelekezo: 2 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 6.1 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#242#242	Dots 3 Note Previewhigh	6.4	Dots Studio	$0.000	70.48s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 7 Tokeni za ingizo 255,887 Tokeni za matokeo 154,879 Tokeni za hoja 603,518 Muda wa majibu (wastani) 70.48s Muda wa majibu (jumla) 1620.93s Muda wa majibu (upeo) 480.52s Jibu lisilo sahihi: 9 Hakuna jibu: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.4 Ufuataji wa maagizo : 8.3 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#243#243	Dots 3 Note Previewlow	6.4	Dots Studio	$0.000	66.13s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 58.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 260,850 Tokeni za matokeo 125,908 Tokeni za hoja 516,424 Muda wa majibu (wastani) 66.13s Muda wa majibu (jumla) 1520.96s Muda wa majibu (upeo) 417.36s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.0 Ufuataji wa maagizo : 7.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#254#254	Space Bunny Alphamedium	6.3	Stealth	$0.000	32.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 267,840 Tokeni za matokeo 192,115 Tokeni za hoja 0 Muda wa majibu (wastani) 32.88s Muda wa majibu (jumla) 756.28s Muda wa majibu (upeo) 197.32s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 5.2 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#271#271	Step 5 Previewmedium	6.1	Stepfun	$4.136	136.10s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 53.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 261,842 Tokeni za matokeo 1,434,621 Tokeni za hoja 0 Muda wa majibu (wastani) 136.10s Muda wa majibu (jumla) 3130.27s Muda wa majibu (upeo) 438.09s Hakuna jibu: 6 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 2.8 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#278#278	Inkling Smallmedium	6.0	Thinkingmachines	$0.113 ↓	6.03s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 100,255 Tokeni za matokeo 6,422 Tokeni za hoja 49,847 Muda wa majibu (wastani) 6.03s Muda wa majibu (jumla) 138.65s Muda wa majibu (upeo) 17.26s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.8 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.3 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 5.8 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#280#280	Gemini 3.1 Flash Liteminimal	5.9	Google	$0.080	3.95s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 49.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 238,785 Tokeni za matokeo 12,875 Tokeni za hoja 0 Muda wa majibu (wastani) 3.95s Muda wa majibu (jumla) 90.76s Muda wa majibu (upeo) 50.03s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 3 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#296#296	Seed 2.1 Turbonone	5.7	Bytedance Seed	$0.182	9.65s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 52.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 298,242 Tokeni za matokeo 13,105 Tokeni za hoja 0 Muda wa majibu (wastani) 9.65s Muda wa majibu (jumla) 221.91s Muda wa majibu (upeo) 71.45s Jibu lisilo sahihi: 12 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 7.1 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#302#302	Step 5 Previewlow	5.6	Stepfun	$4.110	138.27s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 58.0% Majaribio yasiyo thabiti 7 Tokeni za ingizo 261,256 Tokeni za matokeo 1,425,268 Tokeni za hoja 0 Muda wa majibu (wastani) 138.27s Muda wa majibu (jumla) 3180.10s Muda wa majibu (upeo) 436.56s Hakuna jibu: 7 Hitilafu ya API: 2 Jibu lisilo sahihi: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.4 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 2.7 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#437#437	Solar Decide Flashdefault	1.7	Upstage	$0.003	1.33s
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 47,586 Tokeni za matokeo 51 Tokeni za hoja 0 Muda wa majibu (wastani) 1.33s Muda wa majibu (jumla) 9.32s Muda wa majibu (upeo) 1.66s Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 0.8 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.4 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#440#440	Tev1 4B Experimentaldefault	1.0	Togethercomputer	$0.002	498ms
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 33,864 Tokeni za matokeo 96 Tokeni za hoja 0 Muda wa majibu (wastani) 498ms Muda wa majibu (jumla) 3.49s Muda wa majibu (upeo) 602ms Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 6.7 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#424#424	Decider V1.2default	2.6	Perplexity	$0.001	517ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 7 Uaminifu 9.4 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 48,363 Tokeni za matokeo 67 Tokeni za hoja 0 Muda wa majibu (wastani) 517ms Muda wa majibu (jumla) 6.20s Muda wa majibu (upeo) 776ms Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 5.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#303#303	GLM 5none	5.6	Z.ai	$0.140 ↑	8.74s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 190,675 Tokeni za matokeo 5,577 Tokeni za hoja 0 Muda wa majibu (wastani) 8.74s Muda wa majibu (jumla) 131.17s Muda wa majibu (upeo) 74.80s Jibu lisilo sahihi: 13 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#222#222	Claude Sonnet 5.5medium	6.5	Anthropic	$1.100	8.03s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 361,183 Tokeni za matokeo 26,609 Tokeni za hoja 11,139 Muda wa majibu (wastani) 8.03s Muda wa majibu (jumla) 184.80s Muda wa majibu (upeo) 51.18s Muundo wa ziada: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Jibu lisilo sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 3.4 Mchanganyiko : 8.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#228#228	GLM 5.1none	6.5	Z.ai	$0.451 ↑	11.10s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 258,956 Tokeni za matokeo 20,076 Tokeni za hoja 0 Muda wa majibu (wastani) 11.10s Muda wa majibu (jumla) 255.39s Muda wa majibu (upeo) 107.19s Jibu lisilo sahihi: 12 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#231#231	Laguna XS 2.1medium	6.4	Poolside	$0.083	48.97s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 46.4% Majaribio yasiyo thabiti 3 Tokeni za ingizo 352,516 Tokeni za matokeo 33,786 Tokeni za hoja 504,506 Muda wa majibu (wastani) 48.97s Muda wa majibu (jumla) 1126.35s Muda wa majibu (upeo) 422.72s Jibu lisilo sahihi: 10 Mwito wa zana si sahihi: 2 Hakuna jibu: 2 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#259#259	Space Bunny Alphaxhigh	6.2	Stealth	$0.000	60.03s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 8 Tokeni za ingizo 363,310 Tokeni za matokeo 381,919 Tokeni za hoja 0 Muda wa majibu (wastani) 60.03s Muda wa majibu (jumla) 1380.67s Muda wa majibu (upeo) 459.99s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 6.6 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 5.6 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#277#277	MiMo-V2.6-Pronone	6.0	Xiaomi	$0.193	9.66s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 278,866 Tokeni za matokeo 82,069 Tokeni za hoja 0 Muda wa majibu (wastani) 9.66s Muda wa majibu (jumla) 222.07s Muda wa majibu (upeo) 106.86s Jibu lisilo sahihi: 10 Muundo wa ziada: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.6 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow