Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-07-20 Modeli zilizotathminiwa: 210

210/210

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#130#130	Step 3.5 Flashmedium	6.0	Stepfun	$0.108 ↑	174.22s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 10 Uaminifu 9.2 Kiwango cha kupita kwa kila jaribio 51.5% Majaribio yasiyo thabiti 1 Tokeni za ingizo 65,707 Tokeni za matokeo 108,561 Tokeni za hoja 293,993 Muda wa majibu (wastani) 174.22s Muda wa majibu (jumla) 2613.32s Muda wa majibu (upeo) 1597.85s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 2.4 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.3 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#71#71	Qwen3.7 Plusnone	7.2	Qwen	$0.106 ↓	12.09s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 98,824 Tokeni za matokeo 58,097 Tokeni za hoja 0 Muda wa majibu (wastani) 12.09s Muda wa majibu (jumla) 265.89s Muda wa majibu (upeo) 206.03s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.3 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#127#127	Qwen3.5-35B-A3Bnone	6.1	Qwen	$0.106 ↓	12.72s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.9% Majaribio yasiyo thabiti 4 Tokeni za ingizo 134,521 Tokeni za matokeo 86,614 Tokeni za hoja 0 Muda wa majibu (wastani) 12.72s Muda wa majibu (jumla) 279.90s Muda wa majibu (upeo) 209.15s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 6.5 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#108#108	Ring-2.6-1Tmedium	6.3	Inclusionai	$0.103 ↑	68.74s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 113,604 Tokeni za matokeo 123,079 Tokeni za hoja 42,754 Muda wa majibu (wastani) 68.74s Muda wa majibu (jumla) 1374.86s Muda wa majibu (upeo) 304.19s Jibu lisilo sahihi: 6 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.3 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#80#80	Seed-2.0-Minimedium	7.0	Bytedance Seed	$0.101	92.53s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 8.5 Kiwango cha kupita kwa kila jaribio 57.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 125,467 Tokeni za matokeo 10,778 Tokeni za hoja 209,856 Muda wa majibu (wastani) 92.53s Muda wa majibu (jumla) 1665.50s Muda wa majibu (upeo) 301.78s Muda umeisha: 5 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#167#167	Mistral Small 4medium	5.1	Mistral	$0.096	10.77s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.4% Majaribio yasiyo thabiti 8 Tokeni za ingizo 140,494 Tokeni za matokeo 39,462 Tokeni za hoja 92,362 Muda wa majibu (wastani) 10.77s Muda wa majibu (jumla) 236.94s Muda wa majibu (upeo) 59.15s Jibu lisilo sahihi: 12 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 5.6 Uandishi wa msimbo : 4.4 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.8 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 3.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#82#82	DeepSeek V4 Pronone	6.9	DeepSeek	$0.096	11.55s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 51.5% Majaribio yasiyo thabiti 4 Tokeni za ingizo 148,069 Tokeni za matokeo 35,551 Tokeni za hoja 0 Muda wa majibu (wastani) 11.55s Muda wa majibu (jumla) 254.11s Muda wa majibu (upeo) 119.44s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 5.6 Mchanganyiko : 7.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#129#129	Nemotron 3 Ultranone	6.1	NVIDIA	$0.095 ↕	3.87s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 101,275 Tokeni za matokeo 9,474 Tokeni za hoja 0 Muda wa majibu (wastani) 3.87s Muda wa majibu (jumla) 85.15s Muda wa majibu (upeo) 37.50s Jibu lisilo sahihi: 12 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#136#136	GPT-5.4 Mininone	5.9	OpenAI	$0.095	1.53s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 79,067 Tokeni za matokeo 7,880 Tokeni za hoja 0 Muda wa majibu (wastani) 1.53s Muda wa majibu (jumla) 33.74s Muda wa majibu (upeo) 9.92s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 3 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#78#78	Mercury 2medium	7.0	Inception	$0.093	2.72s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 51.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 109,572 Tokeni za matokeo 10,313 Tokeni za hoja 76,806 Muda wa majibu (wastani) 2.72s Muda wa majibu (jumla) 57.12s Muda wa majibu (upeo) 14.63s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#103#103	Qwen3.5-27Bnone	6.5	Qwen	$0.090 ↑	4.76s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 102,316 Tokeni za matokeo 24,321 Tokeni za hoja 0 Muda wa majibu (wastani) 4.76s Muda wa majibu (jumla) 104.71s Muda wa majibu (upeo) 69.46s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#95#95	Gemma 4 26B A4Bmedium	6.6	Google	$0.089 ↓	103.83s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 8 Uaminifu 9.4 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 77,550 Tokeni za matokeo 28,036 Tokeni za hoja 219,491 Muda wa majibu (wastani) 103.83s Muda wa majibu (jumla) 2180.47s Muda wa majibu (upeo) 912.19s Jibu lisilo sahihi: 3 Hakuna jibu: 2 Muda umeisha: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 2.9 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#152#152	Qwen3.6 27Bnone	5.5	Qwen	$0.087 ↑	10.65s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 45.5% Majaribio yasiyo thabiti 6 Tokeni za ingizo 95,796 Tokeni za matokeo 16,155 Tokeni za hoja 0 Muda wa majibu (wastani) 10.65s Muda wa majibu (jumla) 234.39s Muda wa majibu (upeo) 156.31s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 3.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.2 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#191#191	Grok 4.20 Betanone	4.4	X AI	$0.087 ↓	1.19s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 30.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 40,597 Tokeni za matokeo 1,657 Tokeni za hoja 0 Muda wa majibu (wastani) 1.19s Muda wa majibu (jumla) 21.43s Muda wa majibu (upeo) 6.48s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 1.8 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#89#89	Gemini 3 Flash Previewnone	6.8	Google	$0.085	2.95s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 104,210 Tokeni za matokeo 10,710 Tokeni za hoja 0 Muda wa majibu (wastani) 2.95s Muda wa majibu (jumla) 44.26s Muda wa majibu (upeo) 21.19s Jibu lisilo sahihi: 8 Hakuna jibu: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#101#101	MiMo-V2.5medium	6.5	Xiaomi	$0.082 ↓	32.20s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 105,447 Tokeni za matokeo 7,120 Tokeni za hoja 230,682 Muda wa majibu (wastani) 32.20s Muda wa majibu (jumla) 708.46s Muda wa majibu (upeo) 162.44s Jibu lisilo sahihi: 5 Muundo wa ziada: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.4 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#76#76	DeepSeek V3.2medium	7.0	DeepSeek	$0.078 ↑	68.62s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 7 Tokeni za ingizo 101,047 Tokeni za matokeo 11,834 Tokeni za hoja 117,014 Muda wa majibu (wastani) 68.62s Muda wa majibu (jumla) 1509.53s Muda wa majibu (upeo) 376.10s Jibu lisilo sahihi: 5 Hitilafu ya API: 2 Muda umeisha: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 6.0 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#144#144	KAT-Coder-Air V2.5high	5.6	Kwaipilot	$0.077	15.90s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 43.9% Majaribio yasiyo thabiti 6 Tokeni za ingizo 50,470 Tokeni za matokeo 3,957 Tokeni za hoja 111,374 Muda wa majibu (wastani) 15.90s Muda wa majibu (jumla) 349.71s Muda wa majibu (upeo) 118.35s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Muundo wa ziada: 3 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 4.3 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#125#125	Qwen3.5-Flashnone	6.1	Qwen	$0.073 ↓	25.28s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 39.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 282,347 Tokeni za matokeo 209,201 Tokeni za hoja 0 Muda wa majibu (wastani) 25.28s Muda wa majibu (jumla) 556.24s Muda wa majibu (upeo) 480.96s Jibu lisilo sahihi: 13 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#107#107	Qwen3.5 Plus 2026-02-15none	6.4	Qwen	$0.073 ↓	9.85s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 48.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 102,646 Tokeni za matokeo 29,370 Tokeni za hoja 0 Muda wa majibu (wastani) 9.85s Muda wa majibu (jumla) 157.63s Muda wa majibu (upeo) 123.00s Jibu lisilo sahihi: 12 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.3 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#185#185	Grok 4.1 Fastmedium	4.7	X AI	$0.069 ↑	23.85s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 42,845 Tokeni za matokeo 2,006 Tokeni za hoja 96,334 Muda wa majibu (wastani) 23.85s Muda wa majibu (jumla) 286.16s Muda wa majibu (upeo) 121.79s Hakufuata maelekezo: 4 Jibu lisilo sahihi: 4 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 7.8 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.8 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#154#154	MiMo-V2.5-Pronone	5.5	Xiaomi	$0.068 ↓	4.12s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 37.9% Majaribio yasiyo thabiti 4 Tokeni za ingizo 124,799 Tokeni za matokeo 15,362 Tokeni za hoja 0 Muda wa majibu (wastani) 4.12s Muda wa majibu (jumla) 90.55s Muda wa majibu (upeo) 53.13s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 4 Hakuna jibu: 1 Mbinu za kupinga AI : 3.3 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#102#102	Laguna XS 2.1medium	6.5	Poolside	$0.068	47.93s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.4% Majaribio yasiyo thabiti 1 Tokeni za ingizo 118,989 Tokeni za matokeo 30,750 Tokeni za hoja 491,833 Muda wa majibu (wastani) 47.93s Muda wa majibu (jumla) 1054.49s Muda wa majibu (upeo) 422.72s Jibu lisilo sahihi: 11 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#182#182	KAT-Coder-Air V2.5none	4.8	Kwaipilot	$0.067	12.17s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 37.9% Majaribio yasiyo thabiti 8 Tokeni za ingizo 69,367 Tokeni za matokeo 93,913 Tokeni za hoja 0 Muda wa majibu (wastani) 12.17s Muda wa majibu (jumla) 267.83s Muda wa majibu (upeo) 121.05s Jibu lisilo sahihi: 13 Muundo wa ziada: 3 Hitilafu ya API: 1 Mbinu za kupinga AI : 5.3 Uandishi wa msimbo : 3.3 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#116#116	Seed-2.0-Litenone	6.2	Bytedance Seed	$0.066	4.40s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.9% Majaribio yasiyo thabiti 4 Tokeni za ingizo 142,197 Tokeni za matokeo 14,746 Tokeni za hoja 0 Muda wa majibu (wastani) 4.40s Muda wa majibu (jumla) 96.84s Muda wa majibu (upeo) 44.58s Jibu lisilo sahihi: 13 Hakuna jibu: 1 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 5.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#124#124	Qwen3.6 Flashnone	6.1	Qwen	$0.062 ↓	3.74s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 139,788 Tokeni za matokeo 30,947 Tokeni za hoja 0 Muda wa majibu (wastani) 3.74s Muda wa majibu (jumla) 82.38s Muda wa majibu (upeo) 48.79s Jibu lisilo sahihi: 12 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#161#161	Qwen3.6 35B A3Bnone	5.3	Qwen	$0.061 ↑	5.52s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 31.8% Majaribio yasiyo thabiti 6 Tokeni za ingizo 93,979 Tokeni za matokeo 46,957 Tokeni za hoja 0 Muda wa majibu (wastani) 5.52s Muda wa majibu (jumla) 110.40s Muda wa majibu (upeo) 39.54s Jibu lisilo sahihi: 13 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#197#197	Grok 4.20none	4.1	X AI	$0.057 ↓	1.11s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 27.3% Majaribio yasiyo thabiti 0 Tokeni za ingizo 41,313 Tokeni za matokeo 1,923 Tokeni za hoja 0 Muda wa majibu (wastani) 1.11s Muda wa majibu (jumla) 19.96s Muda wa majibu (upeo) 6.04s Jibu lisilo sahihi: 10 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#173#173	DeepSeek V3.2none	5.0	DeepSeek	$0.054 ↑	18.25s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 37.9% Majaribio yasiyo thabiti 6 Tokeni za ingizo 135,780 Tokeni za matokeo 42,097 Tokeni za hoja 0 Muda wa majibu (wastani) 18.25s Muda wa majibu (jumla) 401.60s Muda wa majibu (upeo) 115.89s Jibu lisilo sahihi: 7 Hitilafu ya API: 4 Muundo wa ziada: 2 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 3.1 Mchanganyiko : 4.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#106#106	Gemini 3.1 Flash Lite Previewnone	6.4	Google	$0.052	1.58s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 57.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 120,942 Tokeni za matokeo 14,292 Tokeni za hoja 0 Muda wa majibu (wastani) 1.58s Muda wa majibu (jumla) 34.72s Muda wa majibu (upeo) 9.27s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

←

1 2 3 4 5 6 7

→

Ulinganisho wa haraka

Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3 Flash PreviewmediumvsGPT-5.6 Sollow Gemini 3 Flash PreviewmediumvsGPT-5.6 Solmedium Gemini 3 Flash PreviewmediumvsGPT-5.6 Solhigh Gemini 3 Flash PreviewmediumvsGPT-5.5low Gemini 3 Flash PreviewmediumvsGemini 3.1 Pro Previewmedium Gemini 3 Flash PreviewmediumvsNemotron 3 UltramediumInapatikana bure Gemini 3 Flash PreviewmediumvsNorth Mini CodemediumInapatikana bure Gemini 3.5 FlashhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low

Ubao wa Viwango wa AI Benchy

Chuja miundo

Ulinganisho wa haraka