Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#289#289	DeepSeek V4.1 Flashnone	5.8	DeepSeek	$0.391 ↑	16.63s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 337,756 Tokeni za matokeo 292,779 Tokeni za hoja 0 Muda wa majibu (wastani) 16.63s Muda wa majibu (jumla) 382.53s Muda wa majibu (upeo) 247.66s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 7.4 Mbinu za kupinga AI : 3.7 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.5 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#350#350	Gemini 3 PRO Previewmedium	4.9	Google	$0.385 ↑	9.05s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 0 Tokeni za ingizo 28,848 Tokeni za matokeo 1,490 Tokeni za hoja 10,102 Muda wa majibu (wastani) 9.05s Muda wa majibu (jumla) 90.53s Muda wa majibu (upeo) 26.24s Hitilafu ya API: 4 Jibu lisilo sahihi: 3 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 3.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#288#288	GPT-5.6 Terranone	5.8	OpenAI	$0.377 ↓	4.11s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 213,564 Tokeni za matokeo 7,381 Tokeni za hoja 0 Muda wa majibu (wastani) 4.11s Muda wa majibu (jumla) 94.52s Muda wa majibu (upeo) 57.98s Jibu lisilo sahihi: 12 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 9.6 Maarifa ya jumla : 3.0
#51#51	Gemini 3.6 Flashlow	9.0	Google	$0.363 ↓	6.82s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 4 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 89.9% Majaribio yasiyo thabiti 3 Tokeni za ingizo 197,570 Tokeni za matokeo 6,364 Tokeni za hoja 50,704 Muda wa majibu (wastani) 6.82s Muda wa majibu (jumla) 156.81s Muda wa majibu (upeo) 48.53s Jibu lisilo sahihi: 4 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 7.8 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.6 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#81#81	Nemotron 3.5 Super VLhigh	8.4	NVIDIA	$0.349	49.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 82.6% Majaribio yasiyo thabiti 6 Tokeni za ingizo 296,001 Tokeni za matokeo 8,105 Tokeni za hoja 600,178 Muda wa majibu (wastani) 49.88s Muda wa majibu (jumla) 1147.24s Muda wa majibu (upeo) 310.51s Jibu lisilo sahihi: 3 Hakufuata maelekezo: 2 Hakuna jibu: 2 Hitilafu ya API: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.4 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 6.5 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#332#332	Mimo V2 PROmedium	5.2	Xiaomi	$0.333 ↑	22.16s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 9 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 5 Tokeni za ingizo 40,961 Tokeni za matokeo 2,518 Tokeni za hoja 81,801 Muda wa majibu (wastani) 22.16s Muda wa majibu (jumla) 443.22s Muda wa majibu (upeo) 136.29s Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.0 Mchanganyiko : 2.3 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#241#241	MiMo-V2.5-Promedium	6.4	Xiaomi	$0.332 ↓	56.72s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 7 Tokeni za ingizo 253,462 Tokeni za matokeo 40,269 Tokeni za hoja 185,716 Muda wa majibu (wastani) 56.72s Muda wa majibu (jumla) 1304.54s Muda wa majibu (upeo) 333.34s Jibu lisilo sahihi: 4 Muundo wa ziada: 3 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#342#342	MiniMax M2.7medium	5.0	Minimax	$0.326 ↑	50.32s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 44.9% Majaribio yasiyo thabiti 10 Tokeni za ingizo 277,130 Tokeni za matokeo 45,188 Tokeni za hoja 129,163 Muda wa majibu (wastani) 50.32s Muda wa majibu (jumla) 1107.03s Muda wa majibu (upeo) 198.82s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 5 Mwito wa zana si sahihi: 2 Hakuna jibu: 2 Muda umeisha: 2 Hitilafu ya API: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 7.9 Uandishi wa msimbo : 5.7 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 3.8 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#261#261	GLM 5 Turbomedium	6.2	Z.ai	$0.323 ↑	23.00s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 35,593 Tokeni za matokeo 12,245 Tokeni za hoja 62,277 Muda wa majibu (wastani) 23.00s Muda wa majibu (jumla) 482.97s Muda wa majibu (upeo) 194.23s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#168#168	Gemini 3.8 Flashlow	7.2	Google	$0.323	7.54s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 81.2% Majaribio yasiyo thabiti 5 Tokeni za ingizo 215,836 Tokeni za matokeo 9,452 Tokeni za hoja 33,289 Muda wa majibu (wastani) 7.54s Muda wa majibu (jumla) 173.36s Muda wa majibu (upeo) 67.18s Jibu lisilo sahihi: 6 Hakuna jibu: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.8 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#83#83	GPT-5 Minimedium	8.4	OpenAI	$0.315 ↑	29.42s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 214,645 Tokeni za matokeo 15,532 Tokeni za hoja 103,679 Muda wa majibu (wastani) 29.42s Muda wa majibu (jumla) 676.56s Muda wa majibu (upeo) 111.48s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 3 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 7.1 Uandishi wa msimbo : 10.0 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#232#232	Qwen3.5-122B-A10Bnone	6.4	Qwen	$0.308 ↓	14.79s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 2 Tokeni za ingizo 405,921 Tokeni za matokeo 97,112 Tokeni za hoja 0 Muda wa majibu (wastani) 14.79s Muda wa majibu (jumla) 340.25s Muda wa majibu (upeo) 212.63s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.7 Mchanganyiko : 5.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#150#150	DeepSeek V4 Flash 0731low	7.4	DeepSeek	$0.306 ↑	88.15s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 231,356 Tokeni za matokeo 43,054 Tokeni za hoja 370,981 Muda wa majibu (wastani) 88.15s Muda wa majibu (jumla) 2027.36s Muda wa majibu (upeo) 438.65s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 7.3 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 6.5 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#66#66	Qwen3.8 27Bhigh	8.7	Qwen	~$0.298	166.34s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 6 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 78.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 348,967 Tokeni za matokeo 1,005 Tokeni za hoja 676,075 Muda wa majibu (wastani) 166.34s Muda wa majibu (jumla) 3825.81s Muda wa majibu (upeo) 640.85s Hakufuata maelekezo: 2 Hakuna jibu: 2 Jibu lisilo sahihi: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.1 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#198#198	Inklinglow	6.8	Thinkingmachines	$0.293 ↓	6.81s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 56.5% Majaribio yasiyo thabiti 4 Tokeni za ingizo 213,901 Tokeni za matokeo 9,623 Tokeni za hoja 12,414 Muda wa majibu (wastani) 6.81s Muda wa majibu (jumla) 156.70s Muda wa majibu (upeo) 44.24s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.1 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#269#269	Inklingnone	6.1	Thinkingmachines	$0.292 ↓	5.30s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 31.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 236,599 Tokeni za matokeo 11,561 Tokeni za hoja 4,975 Muda wa majibu (wastani) 5.30s Muda wa majibu (jumla) 121.91s Muda wa majibu (upeo) 48.02s Jibu lisilo sahihi: 13 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#295#295	Mistral Large 4none	5.7	Mistral	$0.290	20.43s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 31.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 257,872 Tokeni za matokeo 54,388 Tokeni za hoja 0 Muda wa majibu (wastani) 20.43s Muda wa majibu (jumla) 469.88s Muda wa majibu (upeo) 192.80s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 4.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.3 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#138#138	Muse Glimmer 30Bmedium	7.7	Meta	$0.288 ↓	33.97s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.2% Majaribio yasiyo thabiti 6 Tokeni za ingizo 269,497 Tokeni za matokeo 34,935 Tokeni za hoja 145,752 Muda wa majibu (wastani) 33.97s Muda wa majibu (jumla) 781.36s Muda wa majibu (upeo) 181.08s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 8.4 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.7 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#18#18	Gemini 3.7 Flashmedium	9.5	Google	$0.278	8.16s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 2 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 94.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 202,347 Tokeni za matokeo 6,660 Tokeni za hoja 68,002 Muda wa majibu (wastani) 8.16s Muda wa majibu (jumla) 187.58s Muda wa majibu (upeo) 58.39s Jibu lisilo sahihi: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.4 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#102#102	Seed-2.0-Litemedium	8.2	Bytedance Seed	$0.271	48.87s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 229,530 Tokeni za matokeo 13,757 Tokeni za hoja 92,662 Muda wa majibu (wastani) 48.87s Muda wa majibu (jumla) 1123.91s Muda wa majibu (upeo) 254.92s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 8.0 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 6.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 9.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#324#324	Kimi K2.5none	5.3	Moonshot AI	$0.262 ↑	35.86s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 275,349 Tokeni za matokeo 49,377 Tokeni za hoja 12 Muda wa majibu (wastani) 35.86s Muda wa majibu (jumla) 609.61s Muda wa majibu (upeo) 321.19s Jibu lisilo sahihi: 17 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#106#106	DeepSeek V4 Flash 0423high	8.1	DeepSeek	$0.261 ↑	55.99s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 298,794 Tokeni za matokeo 45,873 Tokeni za hoja 188,721 Muda wa majibu (wastani) 55.99s Muda wa majibu (jumla) 1287.87s Muda wa majibu (upeo) 218.13s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 7.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#313#313	Seed-2.0-Codenone	5.4	Bytedance Seed	$0.257	17.51s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.0 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 319,668 Tokeni za matokeo 32,069 Tokeni za hoja 0 Muda wa majibu (wastani) 17.51s Muda wa majibu (jumla) 402.66s Muda wa majibu (upeo) 132.84s Jibu lisilo sahihi: 12 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#188#188	Gemini 3 Flash Previewlow	6.9	Google	$0.254	8.51s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 72.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 251,677 Tokeni za matokeo 11,196 Tokeni za hoja 31,204 Muda wa majibu (wastani) 8.51s Muda wa majibu (jumla) 195.76s Muda wa majibu (upeo) 52.64s Jibu lisilo sahihi: 7 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#215#215	GLM 5.2none	6.6	Z.ai	$0.250 ↑	11.27s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 3 Tokeni za ingizo 247,919 Tokeni za matokeo 17,685 Tokeni za hoja 0 Muda wa majibu (wastani) 11.27s Muda wa majibu (jumla) 259.32s Muda wa majibu (upeo) 79.65s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 3.7 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 6.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow