Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-07-20 Modeli zilizotathminiwa: 210

210/210

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#1🥇 #1	Gemini 3 Flash Previewmedium	9.6	Google	$0.742	19.20s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 1 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 98.5% Majaribio yasiyo thabiti 1 Tokeni za ingizo 87,861 Tokeni za matokeo 5,486 Tokeni za hoja 227,164 Muda wa majibu (wastani) 19.20s Muda wa majibu (jumla) 422.42s Muda wa majibu (upeo) 117.26s Jibu lisilo sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.6 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 10.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#62#62	KAT-Coder-Pro V2.5low	7.4	Kwaipilot	$0.387	19.47s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.7% Majaribio yasiyo thabiti 8 Tokeni za ingizo 87,673 Tokeni za matokeo 7,166 Tokeni za hoja 101,474 Muda wa majibu (wastani) 19.47s Muda wa majibu (jumla) 428.31s Muda wa majibu (upeo) 209.15s Jibu lisilo sahihi: 10 Hitilafu ya API: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 7.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 4.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#138#138	Kimi K2.6none	5.8	Moonshot AI	$0.184 ↓	19.58s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 116,970 Tokeni za matokeo 30,253 Tokeni za hoja 0 Muda wa majibu (wastani) 19.58s Muda wa majibu (jumla) 430.85s Muda wa majibu (upeo) 238.89s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 3 Hakuna jibu: 1 Mbinu za kupinga AI : 4.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#113#113	MiMo-V2-Flashmedium	6.3	Xiaomi	$0.043 ↑	20.11s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.1% Majaribio yasiyo thabiti 3 Tokeni za ingizo 40,111 Tokeni za matokeo 12,476 Tokeni za hoja 125,039 Muda wa majibu (wastani) 20.11s Muda wa majibu (jumla) 301.59s Muda wa majibu (upeo) 96.01s Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.1 Uandishi wa msimbo : 6.0 Mchanganyiko : 4.9 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#67#67	Step 3.7 Flashlow	7.3	Stepfun	$0.454	20.68s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.2% Majaribio yasiyo thabiti 5 Tokeni za ingizo 103,833 Tokeni za matokeo 376,581 Tokeni za hoja 0 Muda wa majibu (wastani) 20.68s Muda wa majibu (jumla) 455.01s Muda wa majibu (upeo) 124.75s Jibu lisilo sahihi: 8 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.2 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#69#69	KAT-Coder-Pro V2.5high	7.2	Kwaipilot	$0.482	20.83s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 6 Tokeni za ingizo 106,076 Tokeni za matokeo 9,071 Tokeni za hoja 127,093 Muda wa majibu (wastani) 20.83s Muda wa majibu (jumla) 458.31s Muda wa majibu (upeo) 199.97s Jibu lisilo sahihi: 10 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 7.0 Uandishi wa msimbo : 6.4 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#25#25	Gemini 2.5 Flashmedium	8.2	Google	$0.643	21.18s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 132,498 Tokeni za matokeo 12,739 Tokeni za hoja 228,464 Muda wa majibu (wastani) 21.18s Muda wa majibu (jumla) 465.89s Muda wa majibu (upeo) 140.50s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 8.4 Uandishi wa msimbo : 7.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#7#7	Gemini 3.1 Pro Previewmedium	9.2	Google	$1.361	21.47s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 2 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 90.9% Majaribio yasiyo thabiti 0 Tokeni za ingizo 92,287 Tokeni za matokeo 5,232 Tokeni za hoja 92,726 Muda wa majibu (wastani) 21.47s Muda wa majibu (jumla) 322.08s Muda wa majibu (upeo) 88.68s Jibu lisilo sahihi: 2 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.9 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#206#206	gpt-oss-120bnone	3.7	OpenAI	$0.010 ↓	21.61s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 9,081 Tokeni za matokeo 51,664 Tokeni za hoja 0 Muda wa majibu (wastani) 21.61s Muda wa majibu (jumla) 345.79s Muda wa majibu (upeo) 113.71s Jibu lisilo sahihi: 8 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 1.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#121#121	gpt-oss-120bmedium	6.1	OpenAI	$0.019 ↓	21.91s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 5 Tokeni za ingizo 108,747 Tokeni za matokeo 29,772 Tokeni za hoja 68,044 Muda wa majibu (wastani) 21.91s Muda wa majibu (jumla) 328.70s Muda wa majibu (upeo) 68.16s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.7 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.4 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 9.8 Maarifa ya jumla : 3.0
#109#109	Mimo V2 PROmedium	6.3	Xiaomi	$0.333 ↑	22.16s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 9 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 69.7% Majaribio yasiyo thabiti 5 Tokeni za ingizo 40,961 Tokeni za matokeo 2,518 Tokeni za hoja 81,801 Muda wa majibu (wastani) 22.16s Muda wa majibu (jumla) 443.22s Muda wa majibu (upeo) 136.29s Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.0 Mchanganyiko : 2.3 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#21#21	GPT-5.2medium	8.4	OpenAI	$0.951	22.62s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 72.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 105,004 Tokeni za matokeo 9,914 Tokeni za hoja 44,868 Muda wa majibu (wastani) 22.62s Muda wa majibu (jumla) 339.28s Muda wa majibu (upeo) 102.93s Hakufuata maelekezo: 3 Jibu lisilo sahihi: 3 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 3.7 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.5 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#49#49	GLM 5 Turbomedium	7.6	Z.ai	$0.323 ↑	23.00s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 35,593 Tokeni za matokeo 12,245 Tokeni za hoja 62,277 Muda wa majibu (wastani) 23.00s Muda wa majibu (jumla) 482.97s Muda wa majibu (upeo) 194.23s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#93#93	GLM 5V Turbomedium	6.7	Z.ai	$0.457	23.08s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 6 Tokeni za ingizo 44,615 Tokeni za matokeo 2,347 Tokeni za hoja 98,415 Muda wa majibu (wastani) 23.08s Muda wa majibu (jumla) 484.63s Muda wa majibu (upeo) 95.88s Jibu lisilo sahihi: 7 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 7.2 Uandishi wa msimbo : 6.0 Mchanganyiko : 3.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 7.0 Maarifa ya jumla : 3.0
#18#18	GPT-5.4medium	8.5	OpenAI	$1.533	23.10s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 77.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 81,127 Tokeni za matokeo 6,155 Tokeni za hoja 82,515 Muda wa majibu (wastani) 23.10s Muda wa majibu (jumla) 508.26s Muda wa majibu (upeo) 100.41s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 8.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#38#38	GLM 5.2medium	7.8	Z.ai	$0.222 ↓	23.28s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 6 Uaminifu 9.5 Kiwango cha kupita kwa kila jaribio 80.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 37,199 Tokeni za matokeo 12,261 Tokeni za hoja 49,500 Muda wa majibu (wastani) 23.28s Muda wa majibu (jumla) 488.94s Muda wa majibu (upeo) 101.36s Jibu lisilo sahihi: 3 Hakuna jibu: 2 Muda umeisha: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#185#185	Grok 4.1 Fastmedium	4.7	X AI	$0.069 ↑	23.85s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 42,845 Tokeni za matokeo 2,006 Tokeni za hoja 96,334 Muda wa majibu (wastani) 23.85s Muda wa majibu (jumla) 286.16s Muda wa majibu (upeo) 121.79s Hakufuata maelekezo: 4 Jibu lisilo sahihi: 4 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 7.8 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.8 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#81#81	KAT-Coder-Pro V2.5medium	6.9	Kwaipilot	$0.467	24.04s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 87,907 Tokeni za matokeo 7,213 Tokeni za hoja 128,251 Muda wa majibu (wastani) 24.04s Muda wa majibu (jumla) 528.92s Muda wa majibu (upeo) 257.00s Jibu lisilo sahihi: 9 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 7.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#153#153	Hy3 previewlow	5.5	Tencent	$0.015 ↕	24.56s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 21,045 Tokeni za matokeo 63,460 Tokeni za hoja 0 Muda wa majibu (wastani) 24.56s Muda wa majibu (jumla) 368.35s Muda wa majibu (upeo) 78.74s Hitilafu ya API: 7 Jibu lisilo sahihi: 4 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#16#16	Muse Spark 1.1medium	8.6	Meta	$1.357	24.97s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 72.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 142,567 Tokeni za matokeo 7,905 Tokeni za hoja 269,225 Muda wa majibu (wastani) 24.97s Muda wa majibu (jumla) 549.31s Muda wa majibu (upeo) 165.38s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 8.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 9.8 Maarifa ya jumla : 3.0
#125#125	Qwen3.5-Flashnone	6.1	Qwen	$0.073 ↓	25.28s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 39.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 282,347 Tokeni za matokeo 209,201 Tokeni za hoja 0 Muda wa majibu (wastani) 25.28s Muda wa majibu (jumla) 556.24s Muda wa majibu (upeo) 480.96s Jibu lisilo sahihi: 13 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#92#92	KAT-Coder-Pro V2.5none	6.7	Kwaipilot	$0.476	25.56s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.2% Majaribio yasiyo thabiti 7 Tokeni za ingizo 98,499 Tokeni za matokeo 135,861 Tokeni za hoja 0 Muda wa majibu (wastani) 25.56s Muda wa majibu (jumla) 562.43s Muda wa majibu (upeo) 335.41s Jibu lisilo sahihi: 10 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 6.1 Mchanganyiko : 4.1 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#40#40	Claude Sonnet 4.6medium	7.8	Anthropic	$2.057	25.91s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 106,292 Tokeni za matokeo 80,748 Tokeni za hoja 35,117 Muda wa majibu (wastani) 25.91s Muda wa majibu (jumla) 362.78s Muda wa majibu (upeo) 140.96s Jibu lisilo sahihi: 4 Muundo wa ziada: 3 Muda umeisha: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 5.7 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#56#56	GPT-5.4 Minimedium	7.5	OpenAI	$0.756	25.94s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 6 Tokeni za ingizo 97,155 Tokeni za matokeo 6,211 Tokeni za hoja 145,544 Muda wa majibu (wastani) 25.94s Muda wa majibu (jumla) 570.66s Muda wa majibu (upeo) 138.75s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.6 Uandishi wa msimbo : 8.4 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 4.5 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#29#29	Step 3.7 Flashmedium	8.0	Stepfun	$0.515	26.37s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 8 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 72.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 114,062 Tokeni za matokeo 427,572 Tokeni za hoja 0 Muda wa majibu (wastani) 26.37s Muda wa majibu (jumla) 580.25s Muda wa majibu (upeo) 152.83s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.8 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#26#26	GPT-5 Minimedium	8.1	OpenAI	$0.237	27.63s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 98,374 Tokeni za matokeo 14,434 Tokeni za hoja 91,498 Muda wa majibu (wastani) 27.63s Muda wa majibu (jumla) 607.92s Muda wa majibu (upeo) 111.48s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 3 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 7.1 Uandishi wa msimbo : 10.0 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#202#202	Grok Build 0.1none	4.0	X AI	$0.547	28.69s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.9% Majaribio yasiyo thabiti 4 Tokeni za ingizo 11,793 Tokeni za matokeo 267,275 Tokeni za hoja 0 Muda wa majibu (wastani) 28.69s Muda wa majibu (jumla) 459.00s Muda wa majibu (upeo) 138.35s Jibu lisilo sahihi: 7 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 3.8 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#75#75	Grok 4.20medium	7.1	X AI	$0.777 ↓	29.47s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 102,791 Tokeni za matokeo 5,363 Tokeni za hoja 253,977 Muda wa majibu (wastani) 29.47s Muda wa majibu (jumla) 648.35s Muda wa majibu (upeo) 199.66s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 6.3 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.9 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#171#171	North Mini Codenone	5.1	Cohere	$0.000	29.95s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 8.7 Kiwango cha kupita kwa kila jaribio 18.2% Majaribio yasiyo thabiti 0 Tokeni za ingizo 130,492 Tokeni za matokeo 26,786 Tokeni za hoja 0 Muda wa majibu (wastani) 29.95s Muda wa majibu (jumla) 658.82s Muda wa majibu (upeo) 159.85s Jibu lisilo sahihi: 12 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#27#27	Muse Spark 1.1high	8.1	Meta	$1.694	31.49s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 129,423 Tokeni za matokeo 8,077 Tokeni za hoja 352,421 Muda wa majibu (wastani) 31.49s Muda wa majibu (jumla) 661.28s Muda wa majibu (upeo) 196.03s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 10.0 Mchanganyiko : 5.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 9.6 Maarifa ya jumla : 3.0

←

1 2 3 4 5 6 7

→

Ulinganisho wa haraka

Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3 Flash PreviewmediumvsGPT-5.6 Sollow Gemini 3 Flash PreviewmediumvsGPT-5.6 Solmedium Gemini 3 Flash PreviewmediumvsGPT-5.6 Solhigh Gemini 3 Flash PreviewmediumvsGPT-5.5low Gemini 3 Flash PreviewmediumvsGemini 3.1 Pro Previewmedium Gemini 3 Flash PreviewmediumvsNemotron 3 UltramediumInapatikana bure Gemini 3 Flash PreviewmediumvsNorth Mini CodemediumInapatikana bure Gemini 3.5 FlashhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low

Ubao wa Viwango wa AI Benchy

Chuja miundo

Ulinganisho wa haraka