Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-01 Modeli zilizotathminiwa: 382

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

382/382

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#357#357	Grok 4.20 Betanone	3.6	X AI	$0.087 ↓	1.19s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 1 Tokeni za ingizo 40,597 Tokeni za matokeo 1,657 Tokeni za hoja 0 Muda wa majibu (wastani) 1.19s Muda wa majibu (jumla) 21.43s Muda wa majibu (upeo) 6.48s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 1.8 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#356#356	Ling 3.0 Tinymedium	3.6	Inclusionai	$0.000	64.99s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 103,898 Tokeni za matokeo 148,304 Tokeni za hoja 774,972 Muda wa majibu (wastani) 64.99s Muda wa majibu (jumla) 1429.68s Muda wa majibu (upeo) 262.20s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.8 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#355#355	Ling 3.0 Tinylow	3.7	Inclusionai	$0.000	63.15s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 99,662 Tokeni za matokeo 146,555 Tokeni za hoja 732,977 Muda wa majibu (wastani) 63.15s Muda wa majibu (jumla) 1389.35s Muda wa majibu (upeo) 252.08s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.6 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#354#354	Ling 3.0 Tinyhigh	3.7	Inclusionai	$0.000	72.24s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 115,314 Tokeni za matokeo 133,965 Tokeni za hoja 816,718 Muda wa majibu (wastani) 72.24s Muda wa majibu (jumla) 1589.23s Muda wa majibu (upeo) 345.15s Hakuna jibu: 7 Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.4 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#353#353	Nemotron 3.5 Lightningnone	3.8	NVIDIA	$0.007 ↕	15.92s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 97,418 Tokeni za matokeo 4,779 Tokeni za hoja 0 Muda wa majibu (wastani) 15.92s Muda wa majibu (jumla) 366.20s Muda wa majibu (upeo) 339.57s Jibu lisilo sahihi: 16 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Muda umeisha: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.1 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#352#352	Granite 4.1 8bnone	3.8	IBM Granite	$0.007	1.38s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 8.7% Majaribio yasiyo thabiti 0 Tokeni za ingizo 113,836 Tokeni za matokeo 5,996 Tokeni za hoja 0 Muda wa majibu (wastani) 1.38s Muda wa majibu (jumla) 31.81s Muda wa majibu (upeo) 16.67s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.9 Uandishi wa msimbo : 4.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 3.6 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#351#351	Ling 3.0 Tinynone	3.8	Inclusionai	$0.000	13.39s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 8.7% Majaribio yasiyo thabiti 0 Tokeni za ingizo 184,579 Tokeni za matokeo 110,071 Tokeni za hoja 0 Muda wa majibu (wastani) 13.39s Muda wa majibu (jumla) 294.48s Muda wa majibu (upeo) 240.61s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.2 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.4 Ufuataji wa maagizo : 3.1 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#350#350	Laguna M.1medium	3.9	Poolside	$0.033 ↕	14.73s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 44,969 Tokeni za matokeo 58,087 Tokeni za hoja 0 Muda wa majibu (wastani) 14.73s Muda wa majibu (jumla) 220.93s Muda wa majibu (upeo) 53.14s Hitilafu ya API: 4 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 1.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#349#349	Grok 4.1 Fastmedium	3.9	X AI	$0.069 ↑	23.85s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 42,845 Tokeni za matokeo 2,006 Tokeni za hoja 96,334 Muda wa majibu (wastani) 23.85s Muda wa majibu (jumla) 286.16s Muda wa majibu (upeo) 121.79s Hakufuata maelekezo: 4 Jibu lisilo sahihi: 4 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 0.8 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.8 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#348#348	Hunter Alphamedium	3.9	OpenRouter	$0.000	10.33s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 28,927 Tokeni za matokeo 4,682 Tokeni za hoja 17,969 Muda wa majibu (wastani) 10.33s Muda wa majibu (jumla) 175.58s Muda wa majibu (upeo) 30.53s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 2 Muda umeisha: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 1.0 Mchanganyiko : 2.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 7.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.1 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#347#347	Grok 4.20 Multi Agent Betamedium	3.9	X AI	$5.599 ↑	9.69s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 46.4% Majaribio yasiyo thabiti 5 Tokeni za ingizo 721,952 Tokeni za matokeo 294,668 Tokeni za hoja 305,374 Muda wa majibu (wastani) 9.69s Muda wa majibu (jumla) 155.07s Muda wa majibu (upeo) 35.28s Jibu lisilo sahihi: 4 Hitilafu ya API: 2 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 3.0 Maarifa ya jumla : 0.0
#346#346	Qwen3.5-9Bmedium	4.0	Qwen	$0.106	110.18s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 8.7 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 6 Tokeni za ingizo 387,323 Tokeni za matokeo 48,562 Tokeni za hoja 410,431 Muda wa majibu (wastani) 110.18s Muda wa majibu (jumla) 1873.00s Muda wa majibu (upeo) 569.97s Muda umeisha: 11 Hakuna jibu: 3 Jibu lisilo sahihi: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 5.1 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.6 Mahususi kwa domeni : 3.6 Akili ya jumla : 2.8 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#345#345	Qwen3.6 Plus Previewmedium	4.0	Qwen	$0.000	15.25s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 39.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 32,639 Tokeni za matokeo 1,153 Tokeni za hoja 62,197 Muda wa majibu (wastani) 15.25s Muda wa majibu (jumla) 182.96s Muda wa majibu (upeo) 43.55s Hitilafu ya API: 8 Jibu lisilo sahihi: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 1.0 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#344#344	Mercury 2.5none	4.1	Inception	$0.026	5.10s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 311,488 Tokeni za matokeo 89,958 Tokeni za hoja 0 Muda wa majibu (wastani) 5.10s Muda wa majibu (jumla) 117.24s Muda wa majibu (upeo) 63.41s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 4 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.8 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 4.9 Utatuzi wa mafumbo : 3.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#343#343	GLM 5 Turbonone	4.2	Z.ai	$0.047 ↑	2.82s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 32,525 Tokeni za matokeo 1,815 Tokeni za hoja 0 Muda wa majibu (wastani) 2.82s Muda wa majibu (jumla) 59.29s Muda wa majibu (upeo) 8.21s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#342#342	gpt-oss-120bnone	4.2	OpenAI	$0.016 ↓	28.63s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 3 Tokeni za ingizo 131,652 Tokeni za matokeo 62,213 Tokeni za hoja 0 Muda wa majibu (wastani) 28.63s Muda wa majibu (jumla) 486.69s Muda wa majibu (upeo) 140.90s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 1.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#341#341	GLM 4.7 Flashmedium	4.2	Z.ai	$0.193	150.90s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.4 Kiwango cha kupita kwa kila jaribio 30.4% Majaribio yasiyo thabiti 8 Tokeni za ingizo 228,711 Tokeni za matokeo 42,254 Tokeni za hoja 422,121 Muda wa majibu (wastani) 150.90s Muda wa majibu (jumla) 2414.33s Muda wa majibu (upeo) 1539.97s Jibu lisilo sahihi: 10 Hakuna jibu: 3 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Muda umeisha: 2 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 4.7 Uandishi wa msimbo : 3.2 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.5 Akili ya jumla : 3.6 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#340#340	MiniMax M2.5medium	4.3	Minimax	$0.440 ↑	102.32s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.3 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 9 Tokeni za ingizo 188,239 Tokeni za matokeo 27,822 Tokeni za hoja 262,674 Muda wa majibu (wastani) 102.32s Muda wa majibu (jumla) 1637.05s Muda wa majibu (upeo) 600.81s Jibu lisilo sahihi: 7 Muda umeisha: 5 Hakufuata maelekezo: 3 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 7.9 Uandishi wa msimbo : 3.4 Mchanganyiko : 3.7 Uchanganuzi na uchimbaji wa data : 4.6 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.8 Ufuataji wa maagizo : 7.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#339#339	Gemini 3.1 Flash Lite Previewhigh	4.3	Google	$2.310	68.14s
Tazama kadi ya modeli Jumla ya majaribio 16 Majaribio yenye makosa 3 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 56.5% Majaribio yasiyo thabiti 0 Tokeni za ingizo 28,980 Tokeni za matokeo 1,283 Tokeni za hoja 1,533,310 Muda wa majibu (wastani) 68.14s Muda wa majibu (jumla) 1090.28s Muda wa majibu (upeo) 280.52s Jibu lisilo sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#338#338	Mercury 2none	4.4	Inception	$0.033	1.18s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 2 Tokeni za ingizo 100,634 Tokeni za matokeo 9,709 Tokeni za hoja 0 Muda wa majibu (wastani) 1.18s Muda wa majibu (jumla) 27.14s Muda wa majibu (upeo) 9.00s Jibu lisilo sahihi: 17 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.4 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#337#337	Cobuddymedium	4.4	Baidu	$0.000	38.01s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 6 Tokeni za ingizo 37,449 Tokeni za matokeo 1,677 Tokeni za hoja 116,703 Muda wa majibu (wastani) 38.01s Muda wa majibu (jumla) 798.15s Muda wa majibu (upeo) 309.02s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 3 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.7 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.2 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#336#336	Granite 4.2 8Bnone	4.4	IBM Granite	$0.037	84.66s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 9.1 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 226,872 Tokeni za matokeo 133,268 Tokeni za hoja 0 Muda wa majibu (wastani) 84.66s Muda wa majibu (jumla) 1947.17s Muda wa majibu (upeo) 747.17s Jibu lisilo sahihi: 11 Muundo wa ziada: 4 Muda umeisha: 3 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.9 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#335#335	Trinity Large Previewnone	4.4	Arcee AI	$0.008 ↑	2.83s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 20.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 29,828 Tokeni za matokeo 2,169 Tokeni za hoja 0 Muda wa majibu (wastani) 2.83s Muda wa majibu (jumla) 56.65s Muda wa majibu (upeo) 14.34s Jibu lisilo sahihi: 12 Hitilafu ya API: 3 Hakufuata maelekezo: 3 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.7 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.5 Ufuataji wa maagizo : 3.5 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#334#334	KAT Coder AIR V2.5none	4.4	Kwaipilot	$0.070	11.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 7 Tokeni za ingizo 69,376 Tokeni za matokeo 97,752 Tokeni za hoja 0 Muda wa majibu (wastani) 11.96s Muda wa majibu (jumla) 275.18s Muda wa majibu (upeo) 121.05s Jibu lisilo sahihi: 13 Muundo wa ziada: 3 Hitilafu ya API: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 5.3 Uandishi wa msimbo : 3.3 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#333#333	Nemotron 3 Supernone	4.5	NVIDIA	$0.016 ↑	7.11s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.5 Kiwango cha kupita kwa kila jaribio 27.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 146,361 Tokeni za matokeo 9,074 Tokeni za hoja 0 Muda wa majibu (wastani) 7.11s Muda wa majibu (jumla) 163.46s Muda wa majibu (upeo) 30.51s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 2 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.6 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow