Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-09-02 Modeli zilizotathminiwa: 308

Miundo inayopendekezwa

GPT-5.6 Sol high Yenye akili Kiwango cha kupita kwa kila jaribio 89.4% Majaribio sahihi 18 / 22 Alama 9.4/10 GPT-5.6 Luna medium Haraka Muda wa majibu (wastani) 7.43s Jumla ya tokeni za matokeo 44,525 Alama 7.4/10 DeepSeek V4 Flash 0731 high Nafuu Bei ya ingizo $0.065 / 1M Bei ya toleo $0.180 / 1M Alama 8.0/10

308/308

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#128#128	Mercury 2medium	7.0	Inception	$0.094	2.95s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 110,515 Tokeni za matokeo 10,325 Tokeni za hoja 77,229 Muda wa majibu (wastani) 2.95s Muda wa majibu (jumla) 61.89s Muda wa majibu (upeo) 14.63s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#131#131	Kimi K2.5medium	7.0	Moonshot AI	$0.479 ↓	98.19s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 8 Tokeni za ingizo 118,496 Tokeni za matokeo 53,522 Tokeni za hoja 167,420 Muda wa majibu (wastani) 98.19s Muda wa majibu (jumla) 1571.05s Muda wa majibu (upeo) 281.00s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muda umeisha: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 6.1 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#134#134	Qwen3.7 Flashmedium	6.9	Qwen	$0.065	47.38s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 114,477 Tokeni za matokeo 12,786 Tokeni za hoja 457,290 Muda wa majibu (wastani) 47.38s Muda wa majibu (jumla) 1042.43s Muda wa majibu (upeo) 593.64s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.2 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 5.8 Utatuzi wa mafumbo : 7.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#139#139	Seed-2.0-Codemedium	6.8	Bytedance Seed	$1.153	101.05s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 7.3 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 76,036 Tokeni za matokeo 7,267 Tokeni za hoja 364,176 Muda wa majibu (wastani) 101.05s Muda wa majibu (jumla) 2223.19s Muda wa majibu (upeo) 626.58s Hitilafu ya API: 6 Jibu lisilo sahihi: 4 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 8.9 Mchanganyiko : 4.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#149#149	LongCat 2.0low	6.7	Meituan	$0.412	113.61s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 54.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 90,870 Tokeni za matokeo 5,676 Tokeni za hoja 314,918 Muda wa majibu (wastani) 113.61s Muda wa majibu (jumla) 2499.46s Muda wa majibu (upeo) 560.39s Jibu lisilo sahihi: 7 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.6 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#157#157	Inkling Smallmedium	6.6	Thinkingmachines	$0.113 ↓	6.30s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.0% Majaribio yasiyo thabiti 3 Tokeni za ingizo 100,255 Tokeni za matokeo 6,422 Tokeni za hoja 49,847 Muda wa majibu (wastani) 6.30s Muda wa majibu (jumla) 138.60s Muda wa majibu (upeo) 17.26s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 4 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.8 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.3 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 5.8 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#162#162	Qwen3.6 27Bmedium	6.5	Qwen	$1.045 ↑	106.06s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 7 Tokeni za ingizo 106,176 Tokeni za matokeo 33,013 Tokeni za hoja 239,560 Muda wa majibu (wastani) 106.06s Muda wa majibu (jumla) 2333.36s Muda wa majibu (upeo) 1085.11s Jibu lisilo sahihi: 5 Hakuna jibu: 3 Mwito wa zana si sahihi: 2 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 7.7 Mchanganyiko : 6.7 Uchanganuzi na uchimbaji wa data : 3.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#167#167	Dots 3 Note Previewlow	6.4	Dots Studio	$0.000	61.81s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 57.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 113,889 Tokeni za matokeo 110,550 Tokeni za hoja 496,487 Muda wa majibu (wastani) 61.81s Muda wa majibu (jumla) 1359.72s Muda wa majibu (upeo) 417.36s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 2 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.0 Ufuataji wa maagizo : 7.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#168#168	Dots 3 Note Previewhigh	6.4	Dots Studio	$0.000	67.81s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.1% Majaribio yasiyo thabiti 6 Tokeni za ingizo 127,621 Tokeni za matokeo 141,858 Tokeni za hoja 590,204 Muda wa majibu (wastani) 67.81s Muda wa majibu (jumla) 1491.80s Muda wa majibu (upeo) 480.52s Jibu lisilo sahihi: 8 Hakuna jibu: 2 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.4 Ufuataji wa maagizo : 8.3 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#177#177	GPT-5.6 Lunalow	6.2	OpenAI	$0.051 ↓	5.20s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 54.5% Majaribio yasiyo thabiti 5 Tokeni za ingizo 96,355 Tokeni za matokeo 8,213 Tokeni za hoja 18,073 Muda wa majibu (wastani) 5.20s Muda wa majibu (jumla) 114.46s Muda wa majibu (upeo) 19.44s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#179#179	Gemini 3.1 Flash Liteminimal	6.1	Google	$0.047	1.85s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 51.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 119,076 Tokeni za matokeo 11,118 Tokeni za hoja 0 Muda wa majibu (wastani) 1.85s Muda wa majibu (jumla) 40.74s Muda wa majibu (upeo) 12.97s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Hakuna jibu: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#185#185	Inklinglow	6.1	Thinkingmachines	$0.187	5.11s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 54.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 109,893 Tokeni za matokeo 8,580 Tokeni za hoja 10,324 Muda wa majibu (wastani) 5.11s Muda wa majibu (jumla) 112.46s Muda wa majibu (upeo) 41.58s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.1 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#203#203	GLM 5.3 Flashlow	5.9	Z.ai	$0.015	9.65s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 56.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 117,551 Tokeni za matokeo 9,199 Tokeni za hoja 14,537 Muda wa majibu (wastani) 9.65s Muda wa majibu (jumla) 212.22s Muda wa majibu (upeo) 90.45s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.4 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#205#205	Seed 2.1 Turbonone	5.9	Bytedance Seed	$0.092	6.84s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 54.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 129,150 Tokeni za matokeo 10,643 Tokeni za hoja 0 Muda wa majibu (wastani) 6.84s Muda wa majibu (jumla) 150.46s Muda wa majibu (upeo) 55.92s Jibu lisilo sahihi: 11 Hakuna jibu: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 7.1 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#270#270	Grok 4.20 Multi Agent Betamedium	4.8	X AI	$5.599 ↑	9.69s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 48.5% Majaribio yasiyo thabiti 5 Tokeni za ingizo 721,952 Tokeni za matokeo 294,668 Tokeni za hoja 305,374 Muda wa majibu (wastani) 9.69s Muda wa majibu (jumla) 155.07s Muda wa majibu (upeo) 35.28s Jibu lisilo sahihi: 4 Hitilafu ya API: 2 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 3.3 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.8 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 3.0 Maarifa ya jumla : 0.0
#274#274	Hunter Alphamedium	4.7	OpenRouter	$0.000	10.33s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 53.0% Majaribio yasiyo thabiti 6 Tokeni za ingizo 28,927 Tokeni za matokeo 4,682 Tokeni za hoja 17,969 Muda wa majibu (wastani) 10.33s Muda wa majibu (jumla) 175.58s Muda wa majibu (upeo) 30.53s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 2 Muda umeisha: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 9.8 Mchanganyiko : 2.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 7.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.1 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#210#210	GLM 5none	5.7	Z.ai	$0.027 ↑	4.03s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 42.4% Majaribio yasiyo thabiti 1 Tokeni za ingizo 37,135 Tokeni za matokeo 1,989 Tokeni za hoja 0 Muda wa majibu (wastani) 4.03s Muda wa majibu (jumla) 56.37s Muda wa majibu (upeo) 11.07s Jibu lisilo sahihi: 12 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 4.0 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#142#142	DeepSeek V4 Pronone	6.8	DeepSeek	$0.226 ↑	11.71s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 148,078 Tokeni za matokeo 35,547 Tokeni za hoja 0 Muda wa majibu (wastani) 11.71s Muda wa majibu (jumla) 257.67s Muda wa majibu (upeo) 119.44s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 5.6 Mchanganyiko : 7.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#152#152	LongCat 2.0high	6.7	Meituan	$0.492	153.29s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 51.5% Majaribio yasiyo thabiti 4 Tokeni za ingizo 93,411 Tokeni za matokeo 30,470 Tokeni za hoja 356,172 Muda wa majibu (wastani) 153.29s Muda wa majibu (jumla) 3372.36s Muda wa majibu (upeo) 941.66s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muda umeisha: 2 Mbinu za kupinga AI : 8.9 Uandishi wa msimbo : 7.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 3.6 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#155#155	Qwen3.5-27Bnone	6.6	Qwen	$0.058 ↓	4.77s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 45.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 102,325 Tokeni za matokeo 24,323 Tokeni za hoja 0 Muda wa majibu (wastani) 4.77s Muda wa majibu (jumla) 105.00s Muda wa majibu (upeo) 69.46s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.8 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#163#163	Laguna XS 2.1medium	6.5	Poolside	$0.068	48.18s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 45.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 118,998 Tokeni za matokeo 30,750 Tokeni za hoja 491,730 Muda wa majibu (wastani) 48.18s Muda wa majibu (jumla) 1059.93s Muda wa majibu (upeo) 422.72s Jibu lisilo sahihi: 10 Hakuna jibu: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#181#181	gpt-oss-120bmedium	6.1	OpenAI	$0.020 ↓	20.81s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 5 Tokeni za ingizo 108,767 Tokeni za matokeo 29,378 Tokeni za hoja 68,904 Muda wa majibu (wastani) 20.81s Muda wa majibu (jumla) 332.88s Muda wa majibu (upeo) 68.16s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.7 Uandishi wa msimbo : 5.9 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.4 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 9.8 Maarifa ya jumla : 3.0
#183#183	Gemini 3.1 Flash Litenone	6.1	Google	$0.046	1.75s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 118,059 Tokeni za matokeo 10,723 Tokeni za hoja 0 Muda wa majibu (wastani) 1.75s Muda wa majibu (jumla) 38.42s Muda wa majibu (upeo) 16.25s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#188#188	Gemma 4 31Bnone	6.1	Google	$0.016 ↓	5.41s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 125,703 Tokeni za matokeo 13,317 Tokeni za hoja 0 Muda wa majibu (wastani) 5.41s Muda wa majibu (jumla) 108.12s Muda wa majibu (upeo) 29.95s Jibu lisilo sahihi: 10 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 6.5 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#211#211	Inkling Smalllow	5.7	Thinkingmachines	$0.055 ↓	2.07s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 81,447 Tokeni za matokeo 2,715 Tokeni za hoja 11,971 Muda wa majibu (wastani) 2.07s Muda wa majibu (jumla) 45.64s Muda wa majibu (upeo) 5.82s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.3 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-5.6 Sollow GPT-5.6 SollowvsGemini 3 Flash Previewmedium Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3.5 FlashhighvsGemini 3.7 Flashmedium Gemini 3.7 FlashmediumvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low GPT-5.5lowvsGrok 4.6high Grok 4.6highvsGemini 3.1 Pro Previewmedium