Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-19 Modeli zilizotathminiwa: 451

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

451/451

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#176#176	Step 3.7 Flashlow	7.2	Stepfun	$0.449	20.72s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 6 Tokeni za ingizo 292,685 Tokeni za matokeo 339,108 Tokeni za hoja 0 Muda wa majibu (wastani) 20.72s Muda wa majibu (jumla) 476.67s Muda wa majibu (upeo) 124.75s Jibu lisilo sahihi: 9 Mwito wa zana si sahihi: 2 Hakuna jibu: 1 Kazi za mawakala : 7.4 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.2 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#177#177	Qwen3.6 27Bmedium	7.2	Qwen	$1.021 ↑	107.79s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.3% Majaribio yasiyo thabiti 7 Tokeni za ingizo 264,147 Tokeni za matokeo 34,419 Tokeni za hoja 253,480 Muda wa majibu (wastani) 107.79s Muda wa majibu (jumla) 2479.26s Muda wa majibu (upeo) 1085.11s Jibu lisilo sahihi: 5 Hakuna jibu: 3 Mwito wa zana si sahihi: 2 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 7.7 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 3.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#178#178	Claude Opus 5none	7.1	Anthropic	$2.766	10.78s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 1 Tokeni za ingizo 396,120 Tokeni za matokeo 31,386 Tokeni za hoja 0 Muda wa majibu (wastani) 10.78s Muda wa majibu (jumla) 247.96s Muda wa majibu (upeo) 79.61s Jibu lisilo sahihi: 7 Muundo wa ziada: 2 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 5.4 Mbinu za kupinga AI : 5.5 Uandishi wa msimbo : 5.9 Mchanganyiko : 8.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#180#180	GLM 5.3 FlashXmedium	7.1	Z.ai	$0.114	7.37s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.6% Majaribio yasiyo thabiti 8 Tokeni za ingizo 205,100 Tokeni za matokeo 8,639 Tokeni za hoja 21,409 Muda wa majibu (wastani) 7.37s Muda wa majibu (jumla) 169.54s Muda wa majibu (upeo) 74.39s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 6.0 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#181#181	Minimax M3.1 Flashlow	7.1	Minimax	$0.000	14.84s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 55.1% Majaribio yasiyo thabiti 1 Tokeni za ingizo 285,795 Tokeni za matokeo 10,087 Tokeni za hoja 86,695 Muda wa majibu (wastani) 14.84s Muda wa majibu (jumla) 341.25s Muda wa majibu (upeo) 133.79s Jibu lisilo sahihi: 9 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 5.7 Mchanganyiko : 7.2 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#182#182	MiMo-V2.6-Flashlow	7.1	Xiaomi	$0.200	54.57s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 256,428 Tokeni za matokeo 9,786 Tokeni za hoja 575,630 Muda wa majibu (wastani) 54.57s Muda wa majibu (jumla) 1255.15s Muda wa majibu (upeo) 345.18s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 8.4 Mchanganyiko : 6.6 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 8.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#183#183	MiMo-V2.5medium	7.1	Xiaomi	$0.130 ↓	49.20s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 259,664 Tokeni za matokeo 8,414 Tokeni za hoja 333,097 Muda wa majibu (wastani) 49.20s Muda wa majibu (jumla) 1131.69s Muda wa majibu (upeo) 316.27s Jibu lisilo sahihi: 5 Muundo wa ziada: 2 Hakuna jibu: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.4 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#184#184	GPT-5.2 Chatdefault	7.0	OpenAI	$0.594	7.43s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 101,104 Tokeni za matokeo 10,414 Tokeni za hoja 19,328 Muda wa majibu (wastani) 7.43s Muda wa majibu (jumla) 163.35s Muda wa majibu (upeo) 38.52s Jibu lisilo sahihi: 6 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.8 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#185#185	Qwen3.6 Max Previewmedium	7.0	Qwen	$1.132 ↓	66.52s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 5 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 79.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 79,249 Tokeni za matokeo 5,097 Tokeni za hoja 165,276 Muda wa majibu (wastani) 66.52s Muda wa majibu (jumla) 1463.50s Muda wa majibu (upeo) 238.07s Jibu lisilo sahihi: 4 Muda umeisha: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.8 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#186#186	Gemini 3.1 Flash Lite Previewmedium	7.0	Google	$0.158	6.78s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 0 Tokeni za ingizo 272,221 Tokeni za matokeo 12,345 Tokeni za hoja 47,189 Muda wa majibu (wastani) 6.78s Muda wa majibu (jumla) 155.96s Muda wa majibu (upeo) 54.91s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 9.1 Uandishi wa msimbo : 5.5 Mchanganyiko : 7.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#187#187	Kimi K2.7 Codemedium	7.0	Moonshot AI	$1.136 ↑	81.18s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 5 Tokeni za ingizo 245,179 Tokeni za matokeo 62,697 Tokeni za hoja 196,621 Muda wa majibu (wastani) 81.18s Muda wa majibu (jumla) 1785.87s Muda wa majibu (upeo) 365.80s Jibu lisilo sahihi: 8 Muda umeisha: 2 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 7.8 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#190#190	Qwen3.5-122B-A10Bmedium	7.0	Qwen	$1.152 ↓	66.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.0% Majaribio yasiyo thabiti 5 Tokeni za ingizo 251,695 Tokeni za matokeo 49,415 Tokeni za hoja 472,775 Muda wa majibu (wastani) 66.96s Muda wa majibu (jumla) 1539.99s Muda wa majibu (upeo) 519.30s Jibu lisilo sahihi: 5 Mwito wa zana si sahihi: 2 Muda umeisha: 2 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.0 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#191#191	Grok 4.6low	6.9	X AI	$0.781	16.44s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 263,427 Tokeni za matokeo 6,006 Tokeni za hoja 36,309 Muda wa majibu (wastani) 16.44s Muda wa majibu (jumla) 378.14s Muda wa majibu (upeo) 57.97s Jibu lisilo sahihi: 8 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#192#192	Gemini 3 Flash Previewlow	6.9	Google	$0.254	8.51s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 72.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 251,677 Tokeni za matokeo 11,196 Tokeni za hoja 31,204 Muda wa majibu (wastani) 8.51s Muda wa majibu (jumla) 195.76s Muda wa majibu (upeo) 52.64s Jibu lisilo sahihi: 7 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#193#193	Muse Glimmer 30Blow	6.9	Meta	$0.219 ↓	22.40s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 6 Tokeni za ingizo 307,228 Tokeni za matokeo 36,044 Tokeni za hoja 71,621 Muda wa majibu (wastani) 22.40s Muda wa majibu (jumla) 515.14s Muda wa majibu (upeo) 234.92s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 2 Hakuna jibu: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.1 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.4 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#194#194	Minimax M3.1 Flashmax	6.9	Minimax	$0.000	40.94s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 6 Tokeni za ingizo 398,523 Tokeni za matokeo 7,992 Tokeni za hoja 303,691 Muda wa majibu (wastani) 40.94s Muda wa majibu (jumla) 941.68s Muda wa majibu (upeo) 256.57s Jibu lisilo sahihi: 8 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 10.0 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 5.1 Ufuataji wa maagizo : 5.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#195#195	Gemini 3.1 Flash Litemedium	6.9	Google	$0.153	6.27s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 228,023 Tokeni za matokeo 10,779 Tokeni za hoja 53,188 Muda wa majibu (wastani) 6.27s Muda wa majibu (jumla) 144.10s Muda wa majibu (upeo) 47.78s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 9.1 Uandishi wa msimbo : 5.5 Mchanganyiko : 7.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#197#197	Gemma 4 31Bmedium	6.9	Google	$0.144 ↓	78.76s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 251,164 Tokeni za matokeo 36,112 Tokeni za hoja 241,203 Muda wa majibu (wastani) 78.76s Muda wa majibu (jumla) 1653.96s Muda wa majibu (upeo) 437.40s Jibu lisilo sahihi: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.3 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 9.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#198#198	GPT-5.6 Lunalow	6.9	OpenAI	$0.049 ↓	6.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 56.5% Majaribio yasiyo thabiti 5 Tokeni za ingizo 202,680 Tokeni za matokeo 9,230 Tokeni za hoja 18,771 Muda wa majibu (wastani) 6.96s Muda wa majibu (jumla) 160.19s Muda wa majibu (upeo) 45.74s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#199#199	Claude Sonnet 5.5low	6.9	Anthropic	$0.909	7.46s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 46.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 291,853 Tokeni za matokeo 24,116 Tokeni za hoja 8,327 Muda wa majibu (wastani) 7.46s Muda wa majibu (jumla) 171.47s Muda wa majibu (upeo) 46.61s Muundo wa ziada: 5 Hakufuata maelekezo: 5 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Jibu lisilo sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 3.2 Mchanganyiko : 7.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#200#200	Claude Opus 4.8none	6.9	Anthropic	$2.334	7.54s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 345,059 Tokeni za matokeo 24,343 Tokeni za hoja 0 Muda wa majibu (wastani) 7.54s Muda wa majibu (jumla) 173.31s Muda wa majibu (upeo) 65.07s Jibu lisilo sahihi: 5 Muundo wa ziada: 3 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#201#201	Kimi K2.6medium	6.8	Moonshot AI	$1.594 ↑	121.25s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 4 Tokeni za ingizo 226,880 Tokeni za matokeo 65,346 Tokeni za hoja 331,325 Muda wa majibu (wastani) 121.25s Muda wa majibu (jumla) 2667.55s Muda wa majibu (upeo) 876.20s Jibu lisilo sahihi: 4 Muda umeisha: 3 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 7.0 Uandishi wa msimbo : 5.7 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#202#202	Qwen3.5-Flashmedium	6.8	Qwen	$0.184	83.68s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 349,177 Tokeni za matokeo 54,279 Tokeni za hoja 477,389 Muda wa majibu (wastani) 83.68s Muda wa majibu (jumla) 1840.92s Muda wa majibu (upeo) 515.38s Jibu lisilo sahihi: 5 Muda umeisha: 3 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 3.7 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#203#203	Inklinglow	6.8	Thinkingmachines	$0.293 ↓	6.81s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 56.5% Majaribio yasiyo thabiti 4 Tokeni za ingizo 213,901 Tokeni za matokeo 9,623 Tokeni za hoja 12,414 Muda wa majibu (wastani) 6.81s Muda wa majibu (jumla) 156.70s Muda wa majibu (upeo) 44.24s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.1 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#204#204	Mercury 2.5 Previewmedium	6.8	Inception	$0.039 ↑	6.66s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 397,291 Tokeni za matokeo 6,355 Tokeni za hoja 143,752 Muda wa majibu (wastani) 6.66s Muda wa majibu (jumla) 153.29s Muda wa majibu (upeo) 74.63s Jibu lisilo sahihi: 4 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.8 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow