Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-01 Modeli zilizotathminiwa: 382

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

382/382

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#226#226	KAT-Coder-Pro V2.5medium	6.2	Kwaipilot	$0.669 ↑	23.94s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.3% Majaribio yasiyo thabiti 8 Tokeni za ingizo 87,916 Tokeni za matokeo 7,213 Tokeni za hoja 132,162 Muda wa majibu (wastani) 23.94s Muda wa majibu (jumla) 550.52s Muda wa majibu (upeo) 257.00s Jibu lisilo sahihi: 9 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 7.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#227#227	GLM 5 Turbomedium	6.2	Z.ai	$0.323 ↑	23.00s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 35,593 Tokeni za matokeo 12,245 Tokeni za hoja 62,277 Muda wa majibu (wastani) 23.00s Muda wa majibu (jumla) 482.97s Muda wa majibu (upeo) 194.23s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#228#228	DeepSeek V4 Flash 0731none	6.2	DeepSeek	$0.055 ↑	27.42s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.4% Majaribio yasiyo thabiti 4 Tokeni za ingizo 349,876 Tokeni za matokeo 39,789 Tokeni za hoja 0 Muda wa majibu (wastani) 27.42s Muda wa majibu (jumla) 630.70s Muda wa majibu (upeo) 387.15s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Muundo wa ziada: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 5.0 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#229#229	Gemini 3.1 Flash Lite Previewnone	6.2	Google	$0.090	3.60s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 1 Tokeni za ingizo 261,962 Tokeni za matokeo 15,760 Tokeni za hoja 0 Muda wa majibu (wastani) 3.60s Muda wa majibu (jumla) 82.91s Muda wa majibu (upeo) 48.59s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#230#230	Claude Fable 5.1low	6.2	Anthropic	$3.395	11.40s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 3 Tokeni za ingizo 209,116 Tokeni za matokeo 10,031 Tokeni za hoja 16,042 Muda wa majibu (wastani) 11.40s Muda wa majibu (jumla) 262.14s Muda wa majibu (upeo) 34.77s Muundo wa ziada: 4 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 3.4 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#231#231	Gemini 3.5 Flashnone	6.1	Google	$1.752	14.13s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 246,061 Tokeni za matokeo 153,595 Tokeni za hoja 0 Muda wa majibu (wastani) 14.13s Muda wa majibu (jumla) 268.55s Muda wa majibu (upeo) 85.26s Hitilafu ya API: 4 Jibu lisilo sahihi: 4 Mwito wa zana si sahihi: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 3.0 Maarifa ya jumla : 2.8
#232#232	Trinity Large Thinkingmedium	6.1	Arcee AI	$0.862	84.01s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 49.3% Majaribio yasiyo thabiti 7 Tokeni za ingizo 319,352 Tokeni za matokeo 158,447 Tokeni za hoja 875,524 Muda wa majibu (wastani) 84.01s Muda wa majibu (jumla) 1932.24s Muda wa majibu (upeo) 525.14s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 6.8 Uandishi wa msimbo : 7.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 4.4 Utatuzi wa mafumbo : 5.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#233#233	Inklingnone	6.1	Thinkingmachines	$0.299 ↓	5.30s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 31.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 236,599 Tokeni za matokeo 16,536 Tokeni za hoja 0 Muda wa majibu (wastani) 5.30s Muda wa majibu (jumla) 121.91s Muda wa majibu (upeo) 48.02s Jibu lisilo sahihi: 13 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#234#234	Qwen3.5 Plus 2026-04-20none	6.1	Qwen	$0.216 ↓	18.49s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 44.9% Majaribio yasiyo thabiti 5 Tokeni za ingizo 299,984 Tokeni za matokeo 69,664 Tokeni za hoja 0 Muda wa majibu (wastani) 18.49s Muda wa majibu (jumla) 425.33s Muda wa majibu (upeo) 206.05s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.9 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#235#235	Granite 4.2 8Bmedium	6.1	IBM Granite	$0.029	50.47s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 8.9 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 259,708 Tokeni za matokeo 16,567 Tokeni za hoja 33,580 Muda wa majibu (wastani) 50.47s Muda wa majibu (jumla) 1160.91s Muda wa majibu (upeo) 557.96s Jibu lisilo sahihi: 9 Muda umeisha: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.4 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 3.8 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#236#236	KAT-Coder-Pro V2.5none	6.1	Kwaipilot	$0.742 ↑	24.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.1% Majaribio yasiyo thabiti 8 Tokeni za ingizo 98,508 Tokeni za matokeo 139,572 Tokeni za hoja 0 Muda wa majibu (wastani) 24.96s Muda wa majibu (jumla) 574.12s Muda wa majibu (upeo) 335.41s Jibu lisilo sahihi: 10 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 6.1 Mchanganyiko : 4.1 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#237#237	Claude Sonnet 4.6none	6.0	Anthropic	$0.661	7.67s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 1 Tokeni za ingizo 123,273 Tokeni za matokeo 19,362 Tokeni za hoja 0 Muda wa majibu (wastani) 7.67s Muda wa majibu (jumla) 122.78s Muda wa majibu (upeo) 51.18s Jibu lisilo sahihi: 5 Muundo wa ziada: 4 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 6.1 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#238#238	GLM 5.3 FlashXlow	6.0	Z.ai	$0.157	9.69s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 9 Tokeni za ingizo 277,028 Tokeni za matokeo 11,965 Tokeni za hoja 31,238 Muda wa majibu (wastani) 9.69s Muda wa majibu (jumla) 222.83s Muda wa majibu (upeo) 77.99s Jibu lisilo sahihi: 10 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#239#239	MiMo-V2.6-Pronone	6.0	Xiaomi	$0.193	9.66s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 278,866 Tokeni za matokeo 82,069 Tokeni za hoja 0 Muda wa majibu (wastani) 9.66s Muda wa majibu (jumla) 222.07s Muda wa majibu (upeo) 106.86s Jibu lisilo sahihi: 10 Muundo wa ziada: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.6 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#240#240	Inkling Smallmedium	6.0	Thinkingmachines	$0.113 ↓	6.03s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 100,255 Tokeni za matokeo 6,422 Tokeni za hoja 49,847 Muda wa majibu (wastani) 6.03s Muda wa majibu (jumla) 138.65s Muda wa majibu (upeo) 17.26s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.8 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.3 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 5.8 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#241#241	Seed-2.0-Litenone	6.0	Bytedance Seed	$0.114	7.49s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 39.1% Majaribio yasiyo thabiti 3 Tokeni za ingizo 314,113 Tokeni za matokeo 17,558 Tokeni za hoja 0 Muda wa majibu (wastani) 7.49s Muda wa majibu (jumla) 172.19s Muda wa majibu (upeo) 75.99s Jibu lisilo sahihi: 14 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 5.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#242#242	Gemini 3.1 Flash Liteminimal	5.9	Google	$0.080	3.95s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 49.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 238,785 Tokeni za matokeo 12,875 Tokeni za hoja 0 Muda wa majibu (wastani) 3.95s Muda wa majibu (jumla) 90.76s Muda wa majibu (upeo) 50.03s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 3 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#243#243	gpt-oss-120bmedium	5.9	OpenAI	$0.030 ↓	31.58s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 285,293 Tokeni za matokeo 29,565 Tokeni za hoja 89,266 Muda wa majibu (wastani) 31.58s Muda wa majibu (jumla) 536.78s Muda wa majibu (upeo) 203.90s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 6.7 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.4 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 9.8 Maarifa ya jumla : 3.0
#244#244	Gemini 3.1 Flash Litenone	5.9	Google	$0.069	3.58s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 4 Tokeni za ingizo 202,069 Tokeni za matokeo 11,961 Tokeni za hoja 0 Muda wa majibu (wastani) 3.58s Muda wa majibu (jumla) 82.24s Muda wa majibu (upeo) 43.82s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#245#245	Qwen3.6 Flashnone	5.9	Qwen	$0.139 ↓	7.63s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 388,929 Tokeni za matokeo 57,714 Tokeni za hoja 0 Muda wa majibu (wastani) 7.63s Muda wa majibu (jumla) 175.42s Muda wa majibu (upeo) 93.47s Jibu lisilo sahihi: 13 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#246#246	Claude Sonnet 5none	5.9	Anthropic	$1.095	8.60s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 393,560 Tokeni za matokeo 30,777 Tokeni za hoja 0 Muda wa majibu (wastani) 8.60s Muda wa majibu (jumla) 197.73s Muda wa majibu (upeo) 64.73s Jibu lisilo sahihi: 9 Muundo wa ziada: 4 Hakuna jibu: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 5.3 Uandishi wa msimbo : 4.6 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#247#247	Nemotron 3 Ultranone	5.9	NVIDIA	$0.157 ↕	6.76s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 2 Tokeni za ingizo 275,381 Tokeni za matokeo 11,544 Tokeni za hoja 0 Muda wa majibu (wastani) 6.76s Muda wa majibu (jumla) 155.50s Muda wa majibu (upeo) 70.17s Jibu lisilo sahihi: 12 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#248#248	Qwen3.7 Flashnone	5.9	Qwen	$0.028	14.70s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 410,787 Tokeni za matokeo 117,742 Tokeni za hoja 0 Muda wa majibu (wastani) 14.70s Muda wa majibu (jumla) 338.13s Muda wa majibu (upeo) 186.24s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#249#249	GPT-5.6 Terranone	5.8	OpenAI	$0.377 ↓	4.11s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 213,564 Tokeni za matokeo 7,381 Tokeni za hoja 0 Muda wa majibu (wastani) 4.11s Muda wa majibu (jumla) 94.52s Muda wa majibu (upeo) 57.98s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 9.6 Maarifa ya jumla : 3.0
#250#250	DeepSeek V4.1 Flashnone	5.8	DeepSeek	$0.157 ↓	16.63s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 337,756 Tokeni za matokeo 292,779 Tokeni za hoja 0 Muda wa majibu (wastani) 16.63s Muda wa majibu (jumla) 382.53s Muda wa majibu (upeo) 247.66s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 7.4 Mbinu za kupinga AI : 3.7 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.5 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

←

1 9 10 11 16

→

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow