Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-01 Modeli zilizotathminiwa: 382

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

382/382

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#351#351	Ling 3.0 Tinynone	3.8	Inclusionai	$0.000	13.39s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 8.7% Majaribio yasiyo thabiti 0 Tokeni za ingizo 184,579 Tokeni za matokeo 110,071 Tokeni za hoja 0 Muda wa majibu (wastani) 13.39s Muda wa majibu (jumla) 294.48s Muda wa majibu (upeo) 240.61s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.2 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.4 Ufuataji wa maagizo : 3.1 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#352#352	Granite 4.1 8bnone	3.8	IBM Granite	$0.007	1.38s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 8.7% Majaribio yasiyo thabiti 0 Tokeni za ingizo 113,836 Tokeni za matokeo 5,996 Tokeni za hoja 0 Muda wa majibu (wastani) 1.38s Muda wa majibu (jumla) 31.81s Muda wa majibu (upeo) 16.67s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.9 Uandishi wa msimbo : 4.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 3.6 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#353#353	Nemotron 3.5 Lightningnone	3.8	NVIDIA	$0.007 ↕	15.92s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 97,418 Tokeni za matokeo 4,779 Tokeni za hoja 0 Muda wa majibu (wastani) 15.92s Muda wa majibu (jumla) 366.20s Muda wa majibu (upeo) 339.57s Jibu lisilo sahihi: 16 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Muda umeisha: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.1 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#354#354	Ling 3.0 Tinyhigh	3.7	Inclusionai	$0.000	72.24s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 115,314 Tokeni za matokeo 133,965 Tokeni za hoja 816,718 Muda wa majibu (wastani) 72.24s Muda wa majibu (jumla) 1589.23s Muda wa majibu (upeo) 345.15s Hakuna jibu: 7 Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.4 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#355#355	Ling 3.0 Tinylow	3.7	Inclusionai	$0.000	63.15s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 99,662 Tokeni za matokeo 146,555 Tokeni za hoja 732,977 Muda wa majibu (wastani) 63.15s Muda wa majibu (jumla) 1389.35s Muda wa majibu (upeo) 252.08s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.6 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#356#356	Ling 3.0 Tinymedium	3.6	Inclusionai	$0.000	64.99s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 103,898 Tokeni za matokeo 148,304 Tokeni za hoja 774,972 Muda wa majibu (wastani) 64.99s Muda wa majibu (jumla) 1429.68s Muda wa majibu (upeo) 262.20s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.8 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#357#357	Grok 4.20 Betanone	3.6	X AI	$0.087 ↓	1.19s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 1 Tokeni za ingizo 40,597 Tokeni za matokeo 1,657 Tokeni za hoja 0 Muda wa majibu (wastani) 1.19s Muda wa majibu (jumla) 21.43s Muda wa majibu (upeo) 6.48s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 1.8 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#358#358	Laguna M.1none	3.6	Poolside	$0.009 ↕	2.89s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 15 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 3 Tokeni za ingizo 38,147 Tokeni za matokeo 2,054 Tokeni za hoja 0 Muda wa majibu (wastani) 2.89s Muda wa majibu (jumla) 43.28s Muda wa majibu (upeo) 15.42s Jibu lisilo sahihi: 10 Hitilafu ya API: 4 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 2.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#359#359	Elephant Alphanone	3.6	Openrouter	$0.000	1.22s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 16 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 33,743 Tokeni za matokeo 2,573 Tokeni za hoja 0 Muda wa majibu (wastani) 1.22s Muda wa majibu (jumla) 22.03s Muda wa majibu (upeo) 3.81s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 4.2 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 4.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#360#360	Elephant Alphamedium	3.5	Openrouter	$0.000	1.27s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 15 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 27.5% Majaribio yasiyo thabiti 1 Tokeni za ingizo 33,744 Tokeni za matokeo 2,596 Tokeni za hoja 0 Muda wa majibu (wastani) 1.27s Muda wa majibu (jumla) 22.82s Muda wa majibu (upeo) 3.70s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 3.7 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#361#361	Hunter Alphanone	3.5	OpenRouter	$0.000	4.70s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 34,329 Tokeni za matokeo 2,264 Tokeni za hoja 0 Muda wa majibu (wastani) 4.70s Muda wa majibu (jumla) 79.86s Muda wa majibu (upeo) 15.17s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 1.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 6.1 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 5.8 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#362#362	Grok 4.20none	3.4	X AI	$0.057 ↓	1.11s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 41,313 Tokeni za matokeo 1,923 Tokeni za hoja 0 Muda wa majibu (wastani) 1.11s Muda wa majibu (jumla) 19.96s Muda wa majibu (upeo) 6.04s Jibu lisilo sahihi: 10 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#363#363	Command A+medium	3.4	Cohere	$0.064	91.72s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 23 Uaminifu 3.5 Kiwango cha kupita kwa kila jaribio 0.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 118,771 Tokeni za matokeo 4,127 Tokeni za hoja 14,668 Muda wa majibu (wastani) 91.72s Muda wa majibu (jumla) 2109.54s Muda wa majibu (upeo) 112.76s Hitilafu ya API: 22 Jibu lisilo sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.0 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#364#364	Laguna Xs.2medium	3.3	Poolside	$0.015 ↕	6.73s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 39,481 Tokeni za matokeo 54,218 Tokeni za hoja 0 Muda wa majibu (wastani) 6.73s Muda wa majibu (jumla) 100.98s Muda wa majibu (upeo) 29.11s Jibu lisilo sahihi: 6 Hitilafu ya API: 4 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 2.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 7.1 Mahususi kwa domeni : 4.1 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#365#365	Hy3 previewnone	3.3	Tencent	$0.007 ↕	12.92s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 21.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 27,172 Tokeni za matokeo 2,661 Tokeni za hoja 0 Muda wa majibu (wastani) 12.92s Muda wa majibu (jumla) 232.64s Muda wa majibu (upeo) 35.84s Jibu lisilo sahihi: 8 Hitilafu ya API: 4 Hakufuata maelekezo: 4 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 2.7 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.1 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#366#366	MiMo-V2-Flashnone	3.3	Xiaomi	$0.025 ↑	2.76s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 17 Uaminifu 6.7 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 36,851 Tokeni za matokeo 68,882 Tokeni za hoja 0 Muda wa majibu (wastani) 2.76s Muda wa majibu (jumla) 46.99s Muda wa majibu (upeo) 19.68s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 4.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.6 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#367#367	Grok Build 0.1none	3.2	X AI	$0.547	28.69s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 11,793 Tokeni za matokeo 267,275 Tokeni za hoja 0 Muda wa majibu (wastani) 28.69s Muda wa majibu (jumla) 459.00s Muda wa majibu (upeo) 138.35s Jibu lisilo sahihi: 7 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 3.8 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#368#368	Command A+high	3.2	Cohere	$0.079	89.96s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 23 Uaminifu 3.5 Kiwango cha kupita kwa kila jaribio 0.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 117,966 Tokeni za matokeo 5,149 Tokeni za hoja 23,514 Muda wa majibu (wastani) 89.96s Muda wa majibu (jumla) 2069.01s Muda wa majibu (upeo) 156.00s Hitilafu ya API: 22 Jibu lisilo sahihi: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.0 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#369#369	Grok 4.1 Fastnone	3.1	X AI	$0.008 ↓	1.62s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 3 Tokeni za ingizo 36,608 Tokeni za matokeo 1,723 Tokeni za hoja 0 Muda wa majibu (wastani) 1.62s Muda wa majibu (jumla) 19.48s Muda wa majibu (upeo) 5.51s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 3 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 1.8 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#370#370	Laguna Xs.2none	3.1	Poolside	$0.004 ↕	806ms
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 21.7% Majaribio yasiyo thabiti 0 Tokeni za ingizo 33,675 Tokeni za matokeo 2,826 Tokeni za hoja 0 Muda wa majibu (wastani) 806ms Muda wa majibu (jumla) 12.09s Muda wa majibu (upeo) 2.01s Jibu lisilo sahihi: 8 Hitilafu ya API: 4 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 0.8 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#371#371	Command A+none	3.0	Cohere	$0.000	77.87s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 23 Uaminifu 0.0 Kiwango cha kupita kwa kila jaribio 0.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 0 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 77.87s Muda wa majibu (jumla) 1791.03s Muda wa majibu (upeo) 106.37s Hitilafu ya API: 23 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.0 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#372#372	Command A+low	3.0	Cohere	$0.073	92.50s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 23 Uaminifu 3.5 Kiwango cha kupita kwa kila jaribio 1.5% Majaribio yasiyo thabiti 1 Tokeni za ingizo 114,874 Tokeni za matokeo 1,992 Tokeni za hoja 23,529 Muda wa majibu (wastani) 92.50s Muda wa majibu (jumla) 2127.40s Muda wa majibu (upeo) 128.54s Hitilafu ya API: 22 Jibu lisilo sahihi: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.0 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#373#373	Nemotron 3 Nano Omni 30b A3b Reasoningmedium	2.7	NVIDIA	$0.000	17.13s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 11,661 Tokeni za matokeo 48,491 Tokeni za hoja 180,695 Muda wa majibu (wastani) 17.13s Muda wa majibu (jumla) 222.66s Muda wa majibu (upeo) 147.45s Jibu lisilo sahihi: 7 Hitilafu ya API: 6 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#374#374	Nemotron 3 Nano Omni 30b A3b Reasoningnone	2.6	NVIDIA	$0.000	728ms
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 14.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 11,661 Tokeni za matokeo 1,302 Tokeni za hoja 0 Muda wa majibu (wastani) 728ms Muda wa majibu (jumla) 9.47s Muda wa majibu (upeo) 2.21s Jibu lisilo sahihi: 9 Hitilafu ya API: 6 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 3.8 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.0 Ufuataji wa maagizo : 4.8 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#375#375	Jev 1.13none	2.6	Typesafe	$0.003	698ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 6 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 67,092 Tokeni za matokeo 18,927 Tokeni za hoja 0 Muda wa majibu (wastani) 698ms Muda wa majibu (jumla) 8.38s Muda wa majibu (upeo) 1.08s Jibu lisilo sahihi: 6 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 2.2 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 3.3 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow