Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#305#305	Nemotron 3.5 Super VLnone	5.5	NVIDIA	$0.040	46.97s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 4 Tokeni za ingizo 251,253 Tokeni za matokeo 3,892 Tokeni za hoja 0 Muda wa majibu (wastani) 46.97s Muda wa majibu (jumla) 1080.29s Muda wa majibu (upeo) 872.07s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 3.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 5.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 4.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#353#353	Qwen3.5-9Bnone	4.9	Qwen	$0.041	37.19s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 307,670 Tokeni za matokeo 70,427 Tokeni za hoja 0 Muda wa majibu (wastani) 37.19s Muda wa majibu (jumla) 855.27s Muda wa majibu (upeo) 433.02s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#322#322	GPT-5.6 Lunanone	5.3	OpenAI	$0.042 ↓	3.78s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 3 Tokeni za ingizo 230,744 Tokeni za matokeo 8,000 Tokeni za hoja 0 Muda wa majibu (wastani) 3.78s Muda wa majibu (jumla) 86.83s Muda wa majibu (upeo) 53.77s Jibu lisilo sahihi: 15 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.8 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 7.1 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#374#374	Hy3 previewlow	4.5	Tencent	$0.042 ↕	24.56s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 2 Tokeni za ingizo 21,045 Tokeni za matokeo 63,460 Tokeni za hoja 0 Muda wa majibu (wastani) 24.56s Muda wa majibu (jumla) 368.35s Muda wa majibu (upeo) 78.74s Hitilafu ya API: 7 Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#333#333	MiMo-V2-Flashmedium	5.1	Xiaomi	$0.043 ↑	20.11s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 3 Tokeni za ingizo 40,111 Tokeni za matokeo 12,476 Tokeni za hoja 125,039 Muda wa majibu (wastani) 20.11s Muda wa majibu (jumla) 301.59s Muda wa majibu (upeo) 96.01s Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.1 Uandishi wa msimbo : 6.0 Mchanganyiko : 4.9 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#225#225	Mercury 2.5high	6.5	Inception	$0.044	7.62s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 59.4% Majaribio yasiyo thabiti 4 Tokeni za ingizo 358,562 Tokeni za matokeo 4,266 Tokeni za hoja 189,410 Muda wa majibu (wastani) 7.62s Muda wa majibu (jumla) 175.36s Muda wa majibu (upeo) 80.30s Jibu lisilo sahihi: 9 Hitilafu ya API: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.4 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#361#361	Laguna S 2.1none	4.7	Poolside	$0.044 ↓	17.65s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 14.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 287,445 Tokeni za matokeo 99,097 Tokeni za hoja 0 Muda wa majibu (wastani) 17.65s Muda wa majibu (jumla) 406.05s Muda wa majibu (upeo) 200.52s Jibu lisilo sahihi: 18 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 5.4 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.4 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 4.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#112#112	Qwen3.8 Flash Nextlow	8.0	Qwen	~$0.045	23.66s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 79.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 342,163 Tokeni za matokeo 1,518 Tokeni za hoja 133,777 Muda wa majibu (wastani) 23.66s Muda wa majibu (jumla) 544.16s Muda wa majibu (upeo) 166.72s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#371#371	Mimo V2 PROdefault	4.6	Xiaomi	$0.045 ↓	2.27s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 39,344 Tokeni za matokeo 2,352 Tokeni za hoja 0 Muda wa majibu (wastani) 2.27s Muda wa majibu (jumla) 45.50s Muda wa majibu (upeo) 6.58s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#345#345	KAT Coder AIR V2.5low	5.0	Kwaipilot	$0.046	10.21s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 61,094 Tokeni za matokeo 6,532 Tokeni za hoja 53,882 Muda wa majibu (wastani) 10.21s Muda wa majibu (jumla) 234.86s Muda wa majibu (upeo) 86.23s Jibu lisilo sahihi: 7 Muundo wa ziada: 4 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 3.5 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#387#387	GLM 5 Turbonone	4.2	Z.ai	$0.047 ↑	2.82s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 32,525 Tokeni za matokeo 1,815 Tokeni za hoja 0 Muda wa majibu (wastani) 2.82s Muda wa majibu (jumla) 59.29s Muda wa majibu (upeo) 8.21s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#335#335	Mistral Small 4none	5.1	Mistral	$0.047	3.12s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 265,602 Tokeni za matokeo 10,913 Tokeni za hoja 0 Muda wa majibu (wastani) 3.12s Muda wa majibu (jumla) 71.87s Muda wa majibu (upeo) 45.46s Jibu lisilo sahihi: 17 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#94#94	GPT-6 Lunamedium	8.3	OpenAI	$0.047	18.07s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 73.9% Majaribio yasiyo thabiti 3 Tokeni za ingizo 203,193 Tokeni za matokeo 5,751 Tokeni za hoja 47,410 Muda wa majibu (wastani) 18.07s Muda wa majibu (jumla) 415.53s Muda wa majibu (upeo) 66.44s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 6.6 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#140#140	Qwen3.8 Flash Nextmedium	7.6	Qwen	~$0.047	24.79s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 75.4% Majaribio yasiyo thabiti 6 Tokeni za ingizo 278,792 Tokeni za matokeo 1,695 Tokeni za hoja 142,270 Muda wa majibu (wastani) 24.79s Muda wa majibu (jumla) 570.26s Muda wa majibu (upeo) 159.62s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#337#337	KAT Coder AIR V2.5medium	5.1	Kwaipilot	$0.048	8.32s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 51,369 Tokeni za matokeo 8,008 Tokeni za hoja 58,568 Muda wa majibu (wastani) 8.32s Muda wa majibu (jumla) 191.40s Muda wa majibu (upeo) 48.19s Jibu lisilo sahihi: 10 Hitilafu ya API: 2 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.6 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#352#352	MiMo-V2.5none	4.9	Xiaomi	$0.049 ↓	9.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 2 Tokeni za ingizo 276,608 Tokeni za matokeo 17,693 Tokeni za hoja 16,267 Muda wa majibu (wastani) 9.88s Muda wa majibu (jumla) 227.24s Muda wa majibu (upeo) 124.23s Jibu lisilo sahihi: 14 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#193#193	GPT-5.6 Lunalow	6.9	OpenAI	$0.049 ↓	6.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 56.5% Majaribio yasiyo thabiti 5 Tokeni za ingizo 202,680 Tokeni za matokeo 9,230 Tokeni za hoja 18,771 Muda wa majibu (wastani) 6.96s Muda wa majibu (jumla) 160.19s Muda wa majibu (upeo) 45.74s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#321#321	Hy3 previewmedium	5.3	Tencent	$0.049 ↕	16.28s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 0 Tokeni za ingizo 27,030 Tokeni za matokeo 73,544 Tokeni za hoja 0 Muda wa majibu (wastani) 16.28s Muda wa majibu (jumla) 293.12s Muda wa majibu (upeo) 46.04s Hitilafu ya API: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#367#367	GLM 5V Turbonone	4.6	Z.ai	$0.052	2.99s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 0 Tokeni za ingizo 37,100 Tokeni za matokeo 1,766 Tokeni za hoja 0 Muda wa majibu (wastani) 2.99s Muda wa majibu (jumla) 62.74s Muda wa majibu (upeo) 6.51s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.6 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#262#262	DeepSeek V4 Flash 0731none	6.2	DeepSeek	$0.053 ↑	27.42s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.4% Majaribio yasiyo thabiti 4 Tokeni za ingizo 349,876 Tokeni za matokeo 39,789 Tokeni za hoja 0 Muda wa majibu (wastani) 27.42s Muda wa majibu (jumla) 630.70s Muda wa majibu (upeo) 387.15s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Muundo wa ziada: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 5.0 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#347#347	Inkling Smallnone	4.9	Thinkingmachines	$0.054 ↓	1.45s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 94,733 Tokeni za matokeo 7,087 Tokeni za hoja 1,683 Muda wa majibu (wastani) 1.45s Muda wa majibu (jumla) 33.24s Muda wa majibu (upeo) 12.35s Jibu lisilo sahihi: 15 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.6 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#328#328	Inkling Smalllow	5.2	Thinkingmachines	$0.055 ↓	1.99s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 4 Tokeni za ingizo 81,447 Tokeni za matokeo 2,715 Tokeni za hoja 11,971 Muda wa majibu (wastani) 1.99s Muda wa majibu (jumla) 45.67s Muda wa majibu (upeo) 5.82s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.3 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#158#158	GLM 5.3 Flashhigh	7.3	Z.ai	$0.056	29.11s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 225,013 Tokeni za matokeo 12,197 Tokeni za hoja 87,143 Muda wa majibu (wastani) 29.11s Muda wa majibu (jumla) 669.54s Muda wa majibu (upeo) 163.41s Jibu lisilo sahihi: 4 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 7.4 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#407#407	Grok 4.20none	3.4	X AI	$0.057 ↓	1.11s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 41,313 Tokeni za matokeo 1,923 Tokeni za hoja 0 Muda wa majibu (wastani) 1.11s Muda wa majibu (jumla) 19.96s Muda wa majibu (upeo) 6.04s Jibu lisilo sahihi: 10 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#318#318	MiMo-V2.6-Flashnone	5.4	Xiaomi	$0.060	6.20s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 276,697 Tokeni za matokeo 75,728 Tokeni za hoja 0 Muda wa majibu (wastani) 6.20s Muda wa majibu (jumla) 142.63s Muda wa majibu (upeo) 62.57s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow