Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-08-15 Modeli zilizotathminiwa: 287

Miundo inayopendekezwa

GPT-5.6 Sol high Yenye akili Kiwango cha kupita kwa kila jaribio 89.4% Majaribio sahihi 18 / 22 Alama 9.4/10 GPT-5.6 Luna medium Haraka Muda wa majibu (wastani) 7.43s Jumla ya tokeni za matokeo 44,525 Alama 7.4/10 DeepSeek V4 Flash 0731 high Nafuu Bei ya ingizo $0.140 / 1M Bei ya toleo $0.280 / 1M Alama 8.0/10

287/287

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#137#137	KAT-Coder-Pro V2.5none	6.7	Kwaipilot	$0.487	26.01s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 8 Tokeni za ingizo 98,508 Tokeni za matokeo 139,572 Tokeni za hoja 0 Muda wa majibu (wastani) 26.01s Muda wa majibu (jumla) 572.22s Muda wa majibu (upeo) 335.41s Jibu lisilo sahihi: 10 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 6.1 Mchanganyiko : 4.1 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#136#136	GLM 5.2none	6.7	Z.ai	$0.078 ↓	9.65s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 2 Tokeni za ingizo 112,458 Tokeni za matokeo 14,344 Tokeni za hoja 0 Muda wa majibu (wastani) 9.65s Muda wa majibu (jumla) 212.38s Muda wa majibu (upeo) 79.65s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 3.7 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 6.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#135#135	Gemma 4 26B A4Bmedium	6.8	Google	$0.111 ↑	104.93s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 77,528 Tokeni za matokeo 26,048 Tokeni za hoja 227,598 Muda wa majibu (wastani) 104.93s Muda wa majibu (jumla) 2203.52s Muda wa majibu (upeo) 912.19s Hakuna jibu: 2 Muda umeisha: 2 Jibu lisilo sahihi: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 2.9 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#134#134	Gemini 3 Flash Previewnone	6.8	Google	$0.085	2.82s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 104,217 Tokeni za matokeo 10,710 Tokeni za hoja 0 Muda wa majibu (wastani) 2.82s Muda wa majibu (jumla) 45.05s Muda wa majibu (upeo) 21.19s Jibu lisilo sahihi: 8 Hakuna jibu: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#133#133	MiMo-V2.5-Promedium	6.8	Xiaomi	$0.221 ↓	48.68s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 6 Tokeni za ingizo 139,892 Tokeni za matokeo 15,569 Tokeni za hoja 169,897 Muda wa majibu (wastani) 48.68s Muda wa majibu (jumla) 1071.02s Muda wa majibu (upeo) 333.34s Muundo wa ziada: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#132#132	DeepSeek V4 Pronone	6.8	DeepSeek	$0.256 ↑	11.71s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 148,078 Tokeni za matokeo 35,547 Tokeni za hoja 0 Muda wa majibu (wastani) 11.71s Muda wa majibu (jumla) 257.67s Muda wa majibu (upeo) 119.44s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 5.6 Mchanganyiko : 7.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#131#131	Solar Pro 4medium	6.8	Upstage	$0.047	127.64s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 62.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 87,902 Tokeni za matokeo 30,743 Tokeni za hoja 335,668 Muda wa majibu (wastani) 127.64s Muda wa majibu (jumla) 2808.09s Muda wa majibu (upeo) 519.91s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 9.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#130#130	Solar Pro 4low	6.8	Upstage	$0.044	136.11s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 6 Tokeni za ingizo 90,556 Tokeni za matokeo 6,153 Tokeni za hoja 332,220 Muda wa majibu (wastani) 136.11s Muda wa majibu (jumla) 2994.49s Muda wa majibu (upeo) 640.89s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.0 Utatuzi wa mafumbo : 9.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#129#129	Seed-2.0-Codemedium	6.8	Bytedance Seed	$1.153	101.05s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 7.3 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 76,036 Tokeni za matokeo 7,267 Tokeni za hoja 364,176 Muda wa majibu (wastani) 101.05s Muda wa majibu (jumla) 2223.19s Muda wa majibu (upeo) 626.58s Hitilafu ya API: 6 Jibu lisilo sahihi: 4 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 8.9 Mchanganyiko : 4.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#128#128	Step 3.7 Flashhigh	6.8	Stepfun	$1.229	70.10s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 98,700 Tokeni za matokeo 1,050,900 Tokeni za hoja 0 Muda wa majibu (wastani) 70.10s Muda wa majibu (jumla) 1542.14s Muda wa majibu (upeo) 364.99s Jibu lisilo sahihi: 7 Hakuna jibu: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.0 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.5 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#127#127	Qwen3.6 Flashmedium	6.8	Qwen	$0.741 ↓	44.97s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 5 Tokeni za ingizo 129,050 Tokeni za matokeo 20,026 Tokeni za hoja 616,923 Muda wa majibu (wastani) 44.97s Muda wa majibu (jumla) 989.32s Muda wa majibu (upeo) 578.13s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.0 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#126#126	Gemini 3.5 Flashnone	6.9	Google	$1.093	10.18s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 13,852 Tokeni za matokeo 119,100 Tokeni za hoja 0 Muda wa majibu (wastani) 10.18s Muda wa majibu (jumla) 183.29s Muda wa majibu (upeo) 64.36s Hitilafu ya API: 4 Jibu lisilo sahihi: 4 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 3.0 Maarifa ya jumla : 2.8
#125#125	Seed-2.0-Codehigh	6.9	Bytedance Seed	$1.273	124.18s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 8.6 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 81,970 Tokeni za matokeo 7,186 Tokeni za hoja 403,389 Muda wa majibu (wastani) 124.18s Muda wa majibu (jumla) 2732.03s Muda wa majibu (upeo) 675.30s Hitilafu ya API: 5 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 6.2 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.6 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#124#124	Qwen3.7 Flashmedium	6.9	Qwen	$0.065	47.38s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 114,477 Tokeni za matokeo 12,786 Tokeni za hoja 457,290 Muda wa majibu (wastani) 47.38s Muda wa majibu (jumla) 1042.43s Muda wa majibu (upeo) 593.64s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 5.8 Utatuzi wa mafumbo : 7.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#123#123	KAT-Coder-Pro V2.5medium	6.9	Kwaipilot	$0.478	24.87s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 8 Tokeni za ingizo 87,916 Tokeni za matokeo 7,213 Tokeni za hoja 132,162 Muda wa majibu (wastani) 24.87s Muda wa majibu (jumla) 547.14s Muda wa majibu (upeo) 257.00s Jibu lisilo sahihi: 9 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 7.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#122#122	Kimi K2.5medium	7.0	Moonshot AI	$0.607 ↑	98.19s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 8 Tokeni za ingizo 118,496 Tokeni za matokeo 53,522 Tokeni za hoja 167,420 Muda wa majibu (wastani) 98.19s Muda wa majibu (jumla) 1571.05s Muda wa majibu (upeo) 281.00s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muda umeisha: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 6.1 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#121#121	Seed-2.0-Minimedium	7.0	Bytedance Seed	$0.116	93.10s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 8.7 Kiwango cha kupita kwa kila jaribio 57.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 125,704 Tokeni za matokeo 10,781 Tokeni za hoja 247,541 Muda wa majibu (wastani) 93.10s Muda wa majibu (jumla) 1768.91s Muda wa majibu (upeo) 301.78s Jibu lisilo sahihi: 5 Muda umeisha: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#120#120	Grok 4.20medium	7.0	X AI	$0.805 ↓	32.56s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 102,986 Tokeni za matokeo 5,860 Tokeni za hoja 264,399 Muda wa majibu (wastani) 32.56s Muda wa majibu (jumla) 716.36s Muda wa majibu (upeo) 199.66s Jibu lisilo sahihi: 6 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 6.3 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.9 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#119#119	Mercury 2medium	7.0	Inception	$0.094	2.95s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 110,515 Tokeni za matokeo 10,325 Tokeni za hoja 77,229 Muda wa majibu (wastani) 2.95s Muda wa majibu (jumla) 61.89s Muda wa majibu (upeo) 14.63s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#118#118	GPT-5.5none	7.0	OpenAI	$0.544	2.35s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.1% Majaribio yasiyo thabiti 2 Tokeni za ingizo 79,294 Tokeni za matokeo 4,915 Tokeni za hoja 0 Muda wa majibu (wastani) 2.35s Muda wa majibu (jumla) 51.78s Muda wa majibu (upeo) 12.24s Jibu lisilo sahihi: 10 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#117#117	GLM 5.1medium	7.0	Z.ai	$0.727 ↓	58.80s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 8.1 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 82,592 Tokeni za matokeo 16,089 Tokeni za hoja 199,800 Muda wa majibu (wastani) 58.80s Muda wa majibu (jumla) 1234.72s Muda wa majibu (upeo) 308.75s Jibu lisilo sahihi: 4 Hakuna jibu: 2 Muda umeisha: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.6 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#116#116	DeepSeek V3.2medium	7.0	DeepSeek	$0.078 ↑	68.43s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 7 Tokeni za ingizo 101,056 Tokeni za matokeo 11,832 Tokeni za hoja 116,955 Muda wa majibu (wastani) 68.43s Muda wa majibu (jumla) 1505.53s Muda wa majibu (upeo) 376.10s Jibu lisilo sahihi: 5 Hitilafu ya API: 2 Muda umeisha: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 6.0 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#115#115	GPT-5.6 Solnone	7.0	OpenAI	$0.524	2.17s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 78,602 Tokeni za matokeo 4,357 Tokeni za hoja 0 Muda wa majibu (wastani) 2.17s Muda wa majibu (jumla) 47.66s Muda wa majibu (upeo) 12.81s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#114#114	Grok 4.3medium	7.0	X AI	$0.741	44.21s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 5 Tokeni za ingizo 140,244 Tokeni za matokeo 13,739 Tokeni za hoja 212,165 Muda wa majibu (wastani) 44.21s Muda wa majibu (jumla) 972.64s Muda wa majibu (upeo) 216.69s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#113#113	Solar Pro 4high	7.1	Upstage	$0.046	120.58s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 79,740 Tokeni za matokeo 23,357 Tokeni za hoja 339,837 Muda wa majibu (wastani) 120.58s Muda wa majibu (jumla) 2652.77s Muda wa majibu (upeo) 491.07s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.7 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.5 Ufuataji wa maagizo : 7.9 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#112#112	Step 3.7 Flashlow	7.1	Stepfun	$0.390	17.87s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 103,842 Tokeni za matokeo 320,393 Tokeni za hoja 0 Muda wa majibu (wastani) 17.87s Muda wa majibu (jumla) 393.04s Muda wa majibu (upeo) 124.75s Jibu lisilo sahihi: 9 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.2 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#111#111	Muse Glimmer 30Blow	7.1	Meta	$0.187	18.64s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 130,312 Tokeni za matokeo 33,867 Tokeni za hoja 62,103 Muda wa majibu (wastani) 18.64s Muda wa majibu (jumla) 410.18s Muda wa majibu (upeo) 234.92s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.1 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.4 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#110#110	Qwen3.5-122B-A10Bmedium	7.1	Qwen	$1.207 ↑	65.67s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 124,780 Tokeni za matokeo 47,694 Tokeni za hoja 439,825 Muda wa majibu (wastani) 65.67s Muda wa majibu (jumla) 1444.68s Muda wa majibu (upeo) 519.30s Jibu lisilo sahihi: 5 Muda umeisha: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.0 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#109#109	Muse Glimmer 30Bmedium	7.2	Meta	$0.280	30.64s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 6 Tokeni za ingizo 116,513 Tokeni za matokeo 33,065 Tokeni za hoja 135,009 Muda wa majibu (wastani) 30.64s Muda wa majibu (jumla) 674.01s Muda wa majibu (upeo) 181.08s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 8.4 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#108#108	Qwen3.7 Flashlow	7.2	Qwen	$0.043	38.05s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 92,191 Tokeni za matokeo 14,286 Tokeni za hoja 289,733 Muda wa majibu (wastani) 38.05s Muda wa majibu (jumla) 837.05s Muda wa majibu (upeo) 394.54s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.7 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 7.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-5.6 Sollow GPT-5.6 SollowvsGemini 3 Flash Previewmedium Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3.5 FlashhighvsGemini 3.7 Flashmedium Gemini 3.7 FlashmediumvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low GPT-5.5lowvsGrok 4.6high Grok 4.6highvsGemini 3.1 Pro Previewmedium Gemini 3.1 Pro PreviewmediumvsGemini 3.7 Flashlow

Ubao wa Viwango wa AI Benchy

Miundo inayopendekezwa

Chuja miundo

Ulinganisho wa haraka