Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#296#296	Seed 2.1 Turbonone	5.7	Bytedance Seed	$0.182	9.65s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 52.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 298,242 Tokeni za matokeo 13,105 Tokeni za hoja 0 Muda wa majibu (wastani) 9.65s Muda wa majibu (jumla) 221.91s Muda wa majibu (upeo) 71.45s Jibu lisilo sahihi: 12 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 7.1 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#277#277	MiMo-V2.6-Pronone	6.0	Xiaomi	$0.193	9.66s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 278,866 Tokeni za matokeo 82,069 Tokeni za hoja 0 Muda wa majibu (wastani) 9.66s Muda wa majibu (jumla) 222.07s Muda wa majibu (upeo) 106.86s Jibu lisilo sahihi: 10 Muundo wa ziada: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.6 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#276#276	GLM 5.3 FlashXlow	6.0	Z.ai	$0.157	9.69s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 9 Tokeni za ingizo 277,028 Tokeni za matokeo 11,965 Tokeni za hoja 31,238 Muda wa majibu (wastani) 9.69s Muda wa majibu (jumla) 222.83s Muda wa majibu (upeo) 77.99s Jibu lisilo sahihi: 10 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#391#391	Grok 4.20 Multi Agent Betamedium	3.9	X AI	$5.599 ↑	9.69s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 46.4% Majaribio yasiyo thabiti 5 Tokeni za ingizo 721,952 Tokeni za matokeo 294,668 Tokeni za hoja 305,374 Muda wa majibu (wastani) 9.69s Muda wa majibu (jumla) 155.07s Muda wa majibu (upeo) 35.28s Jibu lisilo sahihi: 4 Hitilafu ya API: 2 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 3.0 Maarifa ya jumla : 0.0
#346#346	Grok 4.20 Betamedium	4.9	X AI	$0.750 ↑	9.75s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 4 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 35,955 Tokeni za matokeo 1,647 Tokeni za hoja 91,565 Muda wa majibu (wastani) 9.75s Muda wa majibu (jumla) 175.48s Muda wa majibu (upeo) 31.36s Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 3.0 Maarifa ya jumla : 0.0
#50#50	Claude Opus 5low	9.0	Anthropic	$2.350	9.87s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 84.1% Majaribio yasiyo thabiti 1 Tokeni za ingizo 352,845 Tokeni za matokeo 16,553 Tokeni za hoja 7,007 Muda wa majibu (wastani) 9.87s Muda wa majibu (jumla) 226.95s Muda wa majibu (upeo) 73.15s Jibu lisilo sahihi: 4 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#372#372	Owl Alphadefault	4.6	Openrouter	$0.000	9.88s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 42,283 Tokeni za matokeo 5,913 Tokeni za hoja 0 Muda wa majibu (wastani) 9.88s Muda wa majibu (jumla) 207.38s Muda wa majibu (upeo) 47.10s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 3 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.6 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#352#352	MiMo-V2.5none	4.9	Xiaomi	$0.049 ↓	9.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 2 Tokeni za ingizo 276,608 Tokeni za matokeo 17,693 Tokeni za hoja 16,267 Muda wa majibu (wastani) 9.88s Muda wa majibu (jumla) 227.24s Muda wa majibu (upeo) 124.23s Jibu lisilo sahihi: 14 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#21#21	GPT-6 Astramedium	9.5	OpenAI	$2.707	9.90s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 3 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 91.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 165,464 Tokeni za matokeo 5,591 Tokeni za hoja 15,454 Muda wa majibu (wastani) 9.90s Muda wa majibu (jumla) 227.67s Muda wa majibu (upeo) 73.48s Jibu lisilo sahihi: 3 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 2.8
#165#165	Qwen3.5-27Bnone	7.2	Qwen	$0.116	9.98s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 2 Tokeni za ingizo 283,977 Tokeni za matokeo 36,422 Tokeni za hoja 0 Muda wa majibu (wastani) 9.98s Muda wa majibu (jumla) 229.52s Muda wa majibu (upeo) 124.53s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#373#373	Ling 2.6 Flashdefault	4.5	Inclusionai	$0.002 ↑	10.21s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 114,384 Tokeni za matokeo 14,903 Tokeni za hoja 0 Muda wa majibu (wastani) 10.21s Muda wa majibu (jumla) 214.31s Muda wa majibu (upeo) 36.03s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Mwito wa zana si sahihi: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.8 Uandishi wa msimbo : 5.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#345#345	KAT Coder AIR V2.5low	5.0	Kwaipilot	$0.046	10.21s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 61,094 Tokeni za matokeo 6,532 Tokeni za hoja 53,882 Muda wa majibu (wastani) 10.21s Muda wa majibu (jumla) 234.86s Muda wa majibu (upeo) 86.23s Jibu lisilo sahihi: 7 Muundo wa ziada: 4 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 3.5 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#392#392	Hunter Alphamedium	3.9	OpenRouter	$0.000	10.33s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 28,927 Tokeni za matokeo 4,682 Tokeni za hoja 17,969 Muda wa majibu (wastani) 10.33s Muda wa majibu (jumla) 175.58s Muda wa majibu (upeo) 30.53s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 2 Muda umeisha: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 1.0 Mchanganyiko : 2.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 7.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.1 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#91#91	Claude Haiku 5.5high	8.3	Anthropic	$0.088	10.41s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 76.8% Majaribio yasiyo thabiti 4 Tokeni za ingizo 346,451 Tokeni za matokeo 10,136 Tokeni za hoja 95,504 Muda wa majibu (wastani) 10.41s Muda wa majibu (jumla) 239.38s Muda wa majibu (upeo) 52.61s Jibu lisilo sahihi: 4 Muundo wa ziada: 2 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#311#311	Gemma 4 26B A4Bnone	5.5	Google	$0.031	10.55s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 1 Tokeni za ingizo 280,126 Tokeni za matokeo 17,306 Tokeni za hoja 0 Muda wa majibu (wastani) 10.55s Muda wa majibu (jumla) 242.57s Muda wa majibu (upeo) 75.76s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 6.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#175#175	Claude Opus 5none	7.1	Anthropic	$2.766	10.78s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 1 Tokeni za ingizo 396,120 Tokeni za matokeo 31,386 Tokeni za hoja 0 Muda wa majibu (wastani) 10.78s Muda wa majibu (jumla) 247.96s Muda wa majibu (upeo) 79.61s Jibu lisilo sahihi: 7 Muundo wa ziada: 2 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 5.4 Mbinu za kupinga AI : 5.5 Uandishi wa msimbo : 5.9 Mchanganyiko : 8.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#73#73	Claude Sonnet 5.5high	8.6	Anthropic	$1.175	10.79s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 81.2% Majaribio yasiyo thabiti 5 Tokeni za ingizo 345,687 Tokeni za matokeo 13,550 Tokeni za hoja 34,743 Muda wa majibu (wastani) 10.79s Muda wa majibu (jumla) 248.22s Muda wa majibu (upeo) 51.53s Jibu lisilo sahihi: 5 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 8.2 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.5 Akili ya jumla : 6.5 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#234#234	Beam 1.0 501B A23Bmax	6.4	Reflection	$0.799	11.10s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 56.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 199,105 Tokeni za matokeo 4,274 Tokeni za hoja 195,495 Muda wa majibu (wastani) 11.10s Muda wa majibu (jumla) 255.26s Muda wa majibu (upeo) 54.48s Jibu lisilo sahihi: 6 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.4 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#228#228	GLM 5.1none	6.5	Z.ai	$0.451 ↑	11.10s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 258,956 Tokeni za matokeo 20,076 Tokeni za hoja 0 Muda wa majibu (wastani) 11.10s Muda wa majibu (jumla) 255.39s Muda wa majibu (upeo) 107.19s Jibu lisilo sahihi: 12 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#13#13	GPT-5.6 Sollow	9.6	OpenAI	$1.244	11.13s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 87.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 191,653 Tokeni za matokeo 5,473 Tokeni za hoja 17,084 Muda wa majibu (wastani) 11.13s Muda wa majibu (jumla) 256.08s Muda wa majibu (upeo) 57.11s Jibu lisilo sahihi: 4 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#215#215	GLM 5.2none	6.6	Z.ai	$0.250 ↑	11.27s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 3 Tokeni za ingizo 247,919 Tokeni za matokeo 17,685 Tokeni za hoja 0 Muda wa majibu (wastani) 11.27s Muda wa majibu (jumla) 259.32s Muda wa majibu (upeo) 79.65s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 3.7 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 6.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#264#264	Claude Fable 5.1low	6.2	Anthropic	$3.395	11.40s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 3 Tokeni za ingizo 209,116 Tokeni za matokeo 10,031 Tokeni za hoja 16,042 Muda wa majibu (wastani) 11.40s Muda wa majibu (jumla) 262.14s Muda wa majibu (upeo) 34.77s Muundo wa ziada: 4 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 3.4 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#119#119	Gemini 3.5 Flashmedium	7.9	Google	$1.316	11.78s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 5 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 81.2% Majaribio yasiyo thabiti 2 Tokeni za ingizo 296,760 Tokeni za matokeo 4,371 Tokeni za hoja 92,284 Muda wa majibu (wastani) 11.78s Muda wa majibu (jumla) 271.03s Muda wa majibu (upeo) 84.47s Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.9 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#64#64	Muse Spark 1.2low	8.7	Meta	$0.881	11.81s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 78.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 254,914 Tokeni za matokeo 10,303 Tokeni za hoja 121,928 Muda wa majibu (wastani) 11.81s Muda wa majibu (jumla) 271.60s Muda wa majibu (upeo) 56.77s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 8.4 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#213#213	GLM 5.3 Flashlow	6.6	Z.ai	$0.038	11.82s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 58.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 255,173 Tokeni za matokeo 9,891 Tokeni za hoja 17,277 Muda wa majibu (wastani) 11.82s Muda wa majibu (jumla) 271.92s Muda wa majibu (upeo) 90.45s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow