Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#398#398	Xing4.0 29b A4bmedium	3.7	Xingchen AGI	$0.000	371.69s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 22 Uaminifu 7.3 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 11 Tokeni za ingizo 98,467 Tokeni za matokeo 3,385 Tokeni za hoja 104,595 Muda wa majibu (wastani) 371.69s Muda wa majibu (jumla) 8548.88s Muda wa majibu (upeo) 971.85s Jibu lisilo sahihi: 9 Muda umeisha: 6 Hitilafu ya API: 4 Hakufuata maelekezo: 3 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.8 Uandishi wa msimbo : 4.2 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.2 Ufuataji wa maagizo : 4.3 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#399#399	Ling 3.0 Tinyhigh	3.7	Inclusionai	$0.000	72.24s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 115,314 Tokeni za matokeo 133,965 Tokeni za hoja 816,718 Muda wa majibu (wastani) 72.24s Muda wa majibu (jumla) 1589.23s Muda wa majibu (upeo) 345.15s Hakuna jibu: 7 Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.4 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#400#400	Ling 3.0 Tinylow	3.7	Inclusionai	$0.000	63.15s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 99,662 Tokeni za matokeo 146,555 Tokeni za hoja 732,977 Muda wa majibu (wastani) 63.15s Muda wa majibu (jumla) 1389.35s Muda wa majibu (upeo) 252.08s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.6 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#401#401	Ling 3.0 Tinymedium	3.6	Inclusionai	$0.000	64.99s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 103,898 Tokeni za matokeo 148,304 Tokeni za hoja 774,972 Muda wa majibu (wastani) 64.99s Muda wa majibu (jumla) 1429.68s Muda wa majibu (upeo) 262.20s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.8 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#404#404	Elephant Alphadefault	3.6	Openrouter	$0.000	1.22s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 16 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 33,743 Tokeni za matokeo 2,573 Tokeni za hoja 0 Muda wa majibu (wastani) 1.22s Muda wa majibu (jumla) 22.03s Muda wa majibu (upeo) 3.81s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 4.2 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 4.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#405#405	Elephant Alphamedium	3.5	Openrouter	$0.000	1.27s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 15 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 27.5% Majaribio yasiyo thabiti 1 Tokeni za ingizo 33,744 Tokeni za matokeo 2,596 Tokeni za hoja 0 Muda wa majibu (wastani) 1.27s Muda wa majibu (jumla) 22.82s Muda wa majibu (upeo) 3.70s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 3.7 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#406#406	Hunter Alphadefault	3.5	OpenRouter	$0.000	4.70s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 4 Tokeni za ingizo 34,329 Tokeni za matokeo 2,264 Tokeni za hoja 0 Muda wa majibu (wastani) 4.70s Muda wa majibu (jumla) 79.86s Muda wa majibu (upeo) 15.17s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 1.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 6.1 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 5.8 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#412#412	Xing4.0 29b A4bnone	3.3	Xingchen AGI	$0.000	42.72s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 23 Uaminifu 8.8 Kiwango cha kupita kwa kila jaribio 7.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 153,665 Tokeni za matokeo 26,540 Tokeni za hoja 0 Muda wa majibu (wastani) 42.72s Muda wa majibu (jumla) 982.66s Muda wa majibu (upeo) 634.11s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 5 Hitilafu ya API: 3 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.3 Uandishi wa msimbo : 3.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.4 Ufuataji wa maagizo : 4.0 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#417#417	Command A+none	3.0	Cohere	$0.000	77.87s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 23 Uaminifu 0.0 Kiwango cha kupita kwa kila jaribio 0.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 0 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 77.87s Muda wa majibu (jumla) 1791.03s Muda wa majibu (upeo) 106.37s Hitilafu ya API: 23 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.0 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#420#420	Nemotron 3 Nano Omni 30b A3b Reasoningmedium	2.7	NVIDIA	$0.000	17.13s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 11,661 Tokeni za matokeo 48,491 Tokeni za hoja 180,695 Muda wa majibu (wastani) 17.13s Muda wa majibu (jumla) 222.66s Muda wa majibu (upeo) 147.45s Jibu lisilo sahihi: 7 Hitilafu ya API: 6 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#422#422	Nemotron 3 Nano Omni 30b A3b Reasoningdefault	2.6	NVIDIA	$0.000	728ms
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 14.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 11,661 Tokeni za matokeo 1,302 Tokeni za hoja 0 Muda wa majibu (wastani) 728ms Muda wa majibu (jumla) 9.47s Muda wa majibu (upeo) 2.21s Jibu lisilo sahihi: 9 Hitilafu ya API: 6 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 3.8 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.0 Ufuataji wa maagizo : 4.8 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#441#441	Nimble v3 9Bdefault	0.8	Bespoke Labs	~$0.001	363ms
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 6 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 4.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 103,770 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 363ms Muda wa majibu (jumla) 2.54s Muda wa majibu (upeo) 1.24s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 2.0 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#436#436	LFM2-24B-A2Bdefault	1.8	Liquid	$0.001	782ms
Tazama kadi ya modeli Jumla ya majaribio 16 Majaribio yenye makosa 14 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 11.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 10,771 Tokeni za matokeo 1,173 Tokeni za hoja 0 Muda wa majibu (wastani) 782ms Muda wa majibu (jumla) 10.94s Muda wa majibu (upeo) 3.15s Jibu lisilo sahihi: 9 Hitilafu ya API: 4 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.8 Mwito wa zana : 3.0 Maarifa ya jumla : 0.0
#432#432	Decider Flash V1.2default	1.9	Perplexity	$0.001	462ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 49,176 Tokeni za matokeo 69 Tokeni za hoja 0 Muda wa majibu (wastani) 462ms Muda wa majibu (jumla) 5.55s Muda wa majibu (upeo) 661ms Jibu lisilo sahihi: 9 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 2.2 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#419#419	Span-02default	2.8	Respan	$0.001	1.36s
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 6 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 70,626 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 1.36s Muda wa majibu (jumla) 16.37s Muda wa majibu (upeo) 5.71s Jibu lisilo sahihi: 6 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 5.8 Uandishi wa msimbo : 4.9 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 5.0 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#424#424	Decider V1.2default	2.6	Perplexity	$0.001	517ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 7 Uaminifu 9.4 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 48,363 Tokeni za matokeo 67 Tokeni za hoja 0 Muda wa majibu (wastani) 517ms Muda wa majibu (jumla) 6.20s Muda wa majibu (upeo) 776ms Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 5.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#440#440	Tev1 4B Experimentaldefault	1.0	Togethercomputer	$0.002	498ms
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 33,864 Tokeni za matokeo 96 Tokeni za hoja 0 Muda wa majibu (wastani) 498ms Muda wa majibu (jumla) 3.49s Muda wa majibu (upeo) 602ms Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.5 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 6.7 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#425#425	Decider V1.1 27Bdefault	2.6	Perplexity	$0.002	320ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 17.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 73,557 Tokeni za matokeo 69 Tokeni za hoja 0 Muda wa majibu (wastani) 320ms Muda wa majibu (jumla) 3.84s Muda wa majibu (upeo) 491ms Jibu lisilo sahihi: 8 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 4.9 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#373#373	Ling 2.6 Flashdefault	4.5	Inclusionai	$0.002 ↑	10.21s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 114,384 Tokeni za matokeo 14,903 Tokeni za hoja 0 Muda wa majibu (wastani) 10.21s Muda wa majibu (jumla) 214.31s Muda wa majibu (upeo) 36.03s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Mwito wa zana si sahihi: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.8 Uandishi wa msimbo : 5.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#426#426	Drex v1.5default	2.4	Nace AI	$0.002	986ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 17.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 42,804 Tokeni za matokeo 27,468 Tokeni za hoja 0 Muda wa majibu (wastani) 986ms Muda wa majibu (jumla) 11.84s Muda wa majibu (upeo) 1.38s Jibu lisilo sahihi: 8 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 4.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#438#438	Microsoft-Decision-1default	1.4	Microsoft	$0.002	982ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 7.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 41,466 Tokeni za matokeo 69 Tokeni za hoja 0 Muda wa majibu (wastani) 982ms Muda wa majibu (jumla) 11.78s Muda wa majibu (upeo) 1.41s Jibu lisilo sahihi: 11 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.4 Uandishi wa msimbo : 2.2 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#428#428	Kev 4Bdefault	2.4	Jaredpalmer	$0.002	5.63s
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 42,804 Tokeni za matokeo 28,061 Tokeni za hoja 0 Muda wa majibu (wastani) 5.63s Muda wa majibu (jumla) 67.61s Muda wa majibu (upeo) 17.79s Jibu lisilo sahihi: 9 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 2.3 Uandishi wa msimbo : 4.5 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 2.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#434#434	D1default	1.9	Liquid	$0.003	508ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 11.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 55,956 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 508ms Muda wa majibu (jumla) 6.10s Muda wa majibu (upeo) 820ms Jibu lisilo sahihi: 10 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 2.2 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#421#421	d1-ultradefault	2.7	Liquid	$0.003	531ms
Tazama kadi ya modeli Jumla ya majaribio 12 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 20.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 55,956 Tokeni za matokeo 0 Tokeni za hoja 0 Muda wa majibu (wastani) 531ms Muda wa majibu (jumla) 6.38s Muda wa majibu (upeo) 697ms Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.0 Uandishi wa msimbo : 5.3 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.7 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0
#437#437	Solar Decide Flashdefault	1.7	Upstage	$0.003	1.33s
Tazama kadi ya modeli Jumla ya majaribio 7 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 13.0% Majaribio yasiyo thabiti 0 Tokeni za ingizo 47,586 Tokeni za matokeo 51 Tokeni za hoja 0 Muda wa majibu (wastani) 1.33s Muda wa majibu (jumla) 9.32s Muda wa majibu (upeo) 1.66s Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 0.8 Uandishi wa msimbo : 0.0 Mchanganyiko : 0.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.4 Akili ya jumla : 0.0 Ufuataji wa maagizo : 1.5 Utatuzi wa mafumbo : 1.0 Mwito wa zana : 0.0 Maarifa ya jumla : 0.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow