Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#330#330	Nemotron 3.5 Lightninghigh	5.2	NVIDIA	$0.168 ↕	77.08s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 12 Tokeni za ingizo 170,517 Tokeni za matokeo 149,968 Tokeni za hoja 509,725 Muda wa majibu (wastani) 77.08s Muda wa majibu (jumla) 1772.78s Muda wa majibu (upeo) 490.99s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 4 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 3.5 Mbinu za kupinga AI : 5.5 Uandishi wa msimbo : 4.4 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.7 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#334#334	Mistral Small 4medium	5.1	Mistral	$0.126 ↑	12.68s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 8 Tokeni za ingizo 321,955 Tokeni za matokeo 41,555 Tokeni za hoja 94,946 Muda wa majibu (wastani) 12.68s Muda wa majibu (jumla) 291.66s Muda wa majibu (upeo) 59.15s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 5.6 Uandishi wa msimbo : 4.4 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 3.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#335#335	Mistral Small 4none	5.1	Mistral	$0.047	3.12s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 265,602 Tokeni za matokeo 10,913 Tokeni za hoja 0 Muda wa majibu (wastani) 3.12s Muda wa majibu (jumla) 71.87s Muda wa majibu (upeo) 45.46s Jibu lisilo sahihi: 17 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#338#338	MiMo-V2.5-Pronone	5.1	Xiaomi	$0.135 ↓	6.21s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 31.9% Majaribio yasiyo thabiti 4 Tokeni za ingizo 273,075 Tokeni za matokeo 17,069 Tokeni za hoja 0 Muda wa majibu (wastani) 6.21s Muda wa majibu (jumla) 142.89s Muda wa majibu (upeo) 53.13s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.3 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#342#342	MiniMax M2.7medium	5.0	Minimax	$0.326 ↑	50.32s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 44.9% Majaribio yasiyo thabiti 10 Tokeni za ingizo 277,130 Tokeni za matokeo 45,188 Tokeni za hoja 129,163 Muda wa majibu (wastani) 50.32s Muda wa majibu (jumla) 1107.03s Muda wa majibu (upeo) 198.82s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 5 Mwito wa zana si sahihi: 2 Hakuna jibu: 2 Muda umeisha: 2 Hitilafu ya API: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 7.9 Uandishi wa msimbo : 5.7 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 3.8 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#344#344	GPT-4o-minidefault	5.0	OpenAI	$0.024	4.16s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 21.7% Majaribio yasiyo thabiti 0 Tokeni za ingizo 145,180 Tokeni za matokeo 3,627 Tokeni za hoja 0 Muda wa majibu (wastani) 4.16s Muda wa majibu (jumla) 70.70s Muda wa majibu (upeo) 39.99s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.2 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#347#347	Inkling Smallnone	4.9	Thinkingmachines	$0.054 ↓	1.45s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 94,733 Tokeni za matokeo 7,087 Tokeni za hoja 1,683 Muda wa majibu (wastani) 1.45s Muda wa majibu (jumla) 33.24s Muda wa majibu (upeo) 12.35s Jibu lisilo sahihi: 15 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.6 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#348#348	Qwen3 Coder Nextdefault	4.9	Qwen	$0.067 ↑	19.73s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 250,329 Tokeni za matokeo 45,168 Tokeni za hoja 0 Muda wa majibu (wastani) 19.73s Muda wa majibu (jumla) 355.09s Muda wa majibu (upeo) 208.38s Jibu lisilo sahihi: 15 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#352#352	MiMo-V2.5none	4.9	Xiaomi	$0.049 ↓	9.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 2 Tokeni za ingizo 276,608 Tokeni za matokeo 17,693 Tokeni za hoja 16,267 Muda wa majibu (wastani) 9.88s Muda wa majibu (jumla) 227.24s Muda wa majibu (upeo) 124.23s Jibu lisilo sahihi: 14 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#357#357	GLM 4.7 Flashnone	4.8	Z.ai	$0.027	13.04s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 3 Tokeni za ingizo 255,363 Tokeni za matokeo 27,395 Tokeni za hoja 0 Muda wa majibu (wastani) 13.04s Muda wa majibu (jumla) 221.61s Muda wa majibu (upeo) 97.15s Jibu lisilo sahihi: 15 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 5.2 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#359#359	Nemotron 3.5 Lightningmedium	4.7	NVIDIA	$0.195 ↕	81.93s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 12 Tokeni za ingizo 195,780 Tokeni za matokeo 167,746 Tokeni za hoja 598,384 Muda wa majibu (wastani) 81.93s Muda wa majibu (jumla) 1884.31s Muda wa majibu (upeo) 437.11s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 4.4 Mchanganyiko : 6.2 Uchanganuzi na uchimbaji wa data : 3.7 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 4.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#369#369	Nemotron 3.5 Lightninglow	4.6	NVIDIA	$0.175 ↕	83.19s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.5 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 9 Tokeni za ingizo 207,883 Tokeni za matokeo 144,718 Tokeni za hoja 525,897 Muda wa majibu (wastani) 83.19s Muda wa majibu (jumla) 1913.41s Muda wa majibu (upeo) 597.61s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 3.5 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 4.0 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.7 Ufuataji wa maagizo : 8.4 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#377#377	Nemotron 3 Supernone	4.5	NVIDIA	$0.016 ↑	7.11s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.5 Kiwango cha kupita kwa kila jaribio 27.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 146,361 Tokeni za matokeo 9,073 Tokeni za hoja 1 Muda wa majibu (wastani) 7.11s Muda wa majibu (jumla) 163.46s Muda wa majibu (upeo) 30.51s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 2 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.6 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#378#378	KAT Coder AIR V2.5default	4.4	Kwaipilot	$0.070	11.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 7 Tokeni za ingizo 69,376 Tokeni za matokeo 7,792 Tokeni za hoja 89,960 Muda wa majibu (wastani) 11.96s Muda wa majibu (jumla) 275.18s Muda wa majibu (upeo) 121.05s Jibu lisilo sahihi: 13 Muundo wa ziada: 3 Hitilafu ya API: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 5.3 Uandishi wa msimbo : 3.3 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#384#384	MiniMax M2.5medium	4.3	Minimax	$0.440 ↑	102.32s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.3 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 9 Tokeni za ingizo 188,239 Tokeni za matokeo 27,822 Tokeni za hoja 262,674 Muda wa majibu (wastani) 102.32s Muda wa majibu (jumla) 1637.05s Muda wa majibu (upeo) 600.81s Jibu lisilo sahihi: 7 Muda umeisha: 5 Hakufuata maelekezo: 3 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 7.9 Uandishi wa msimbo : 3.4 Mchanganyiko : 3.7 Uchanganuzi na uchimbaji wa data : 4.6 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.8 Ufuataji wa maagizo : 7.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#404#404	Elephant Alphadefault	3.6	Openrouter	$0.000	1.22s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 16 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 33,743 Tokeni za matokeo 2,573 Tokeni za hoja 0 Muda wa majibu (wastani) 1.22s Muda wa majibu (jumla) 22.03s Muda wa majibu (upeo) 3.81s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 4.2 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 4.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#427#427	GPT-6 Luna Decisionsdefault	2.4	OpenAI	$0.005	495ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 47,583 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 495ms Muda wa majibu (jumla) 5.94s Muda wa majibu (upeo) 842ms Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.3 Uandishi wa msimbo : 2.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#428#428	Kev 4Bdefault	2.4	Jaredpalmer	$0.002	5.63s
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 42,804 Tokeni za matokeo 28,061 Tokeni za hoja 0 Muda wa majibu (wastani) 5.63s Muda wa majibu (jumla) 67.61s Muda wa majibu (upeo) 17.79s Jibu lisilo sahihi: 9 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.3 Uandishi wa msimbo : 4.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 2.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#430#430	Classify-1default	2.2	Scaledown	$0.008	4.58s
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 9.4 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 2 Tokeni za ingizo 195,645 Tokeni za matokeo 164 Tokeni za hoja 0 Muda wa majibu (wastani) 4.58s Muda wa majibu (jumla) 55.01s Muda wa majibu (upeo) 13.35s Jibu lisilo sahihi: 8 Hitilafu ya API: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 2.7 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#432#432	Decider Flash V1.2default	1.9	Perplexity	$0.001	462ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 49,176 Tokeni za matokeo 69 Tokeni za hoja 0 Muda wa majibu (wastani) 462ms Muda wa majibu (jumla) 5.55s Muda wa majibu (upeo) 661ms Jibu lisilo sahihi: 9 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 2.2 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#292#292	Trinity Large Thinkinghigh	5.7	Arcee AI	$0.794 ↑	74.52s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 8 Tokeni za ingizo 283,116 Tokeni za matokeo 277,920 Tokeni za hoja 665,124 Muda wa majibu (wastani) 74.52s Muda wa majibu (jumla) 1713.90s Muda wa majibu (upeo) 510.21s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 6.7 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 4.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#294#294	GPT-5.4 Mininone	5.7	OpenAI	$0.170	3.34s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.4% Majaribio yasiyo thabiti 2 Tokeni za ingizo 172,438 Tokeni za matokeo 8,828 Tokeni za hoja 0 Muda wa majibu (wastani) 3.34s Muda wa majibu (jumla) 76.84s Muda wa majibu (upeo) 41.98s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 3 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#295#295	Mistral Large 4none	5.7	Mistral	$0.290	20.43s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 31.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 257,872 Tokeni za matokeo 54,388 Tokeni za hoja 0 Muda wa majibu (wastani) 20.43s Muda wa majibu (jumla) 469.88s Muda wa majibu (upeo) 192.80s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 4.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.3 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#304#304	Qwen3.5-35B-A3Bnone	5.6	Qwen	$0.120 ↓	18.31s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 218,886 Tokeni za matokeo 135,768 Tokeni za hoja 0 Muda wa majibu (wastani) 18.31s Muda wa majibu (jumla) 421.19s Muda wa majibu (upeo) 209.15s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 6.5 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#307#307	Kimi K2.6none	5.5	Moonshot AI	$0.486 ↑	26.34s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.4% Majaribio yasiyo thabiti 3 Tokeni za ingizo 241,357 Tokeni za matokeo 64,021 Tokeni za hoja 1 Muda wa majibu (wastani) 26.34s Muda wa majibu (jumla) 605.78s Muda wa majibu (upeo) 238.89s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 3 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 4.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow