Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-09-02 Modeli zilizotathminiwa: 305

Miundo inayopendekezwa

GPT-5.6 Sol high Yenye akili Kiwango cha kupita kwa kila jaribio 89.4% Majaribio sahihi 18 / 22 Alama 9.4/10 GPT-5.6 Luna medium Haraka Muda wa majibu (wastani) 7.43s Jumla ya tokeni za matokeo 44,525 Alama 7.4/10 DeepSeek V4 Flash 0731 high Nafuu Bei ya ingizo $0.065 / 1M Bei ya toleo $0.180 / 1M Alama 8.0/10

305/305

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#227#227	DeepSeek V4 Flash 0423none	5.4	DeepSeek	$0.040 ↓	36.17s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 27.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 240,230 Tokeni za matokeo 100,726 Tokeni za hoja 0 Muda wa majibu (wastani) 36.17s Muda wa majibu (jumla) 795.83s Muda wa majibu (upeo) 247.27s Jibu lisilo sahihi: 13 Muundo wa ziada: 2 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 4.2 Mchanganyiko : 4.6 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#228#228	Laguna S 2.1medium	5.4	Poolside	$0.053 ↓	58.42s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 86,647 Tokeni za matokeo 97,298 Tokeni za hoja 242,297 Muda wa majibu (wastani) 58.42s Muda wa majibu (jumla) 1285.26s Muda wa majibu (upeo) 560.31s Jibu lisilo sahihi: 13 Mwito wa zana si sahihi: 2 Hakuna jibu: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.3 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.6 Ufuataji wa maagizo : 4.2 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#233#233	DeepSeek V4 Flash 0731none	5.4	DeepSeek	$0.011 ↓	20.72s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 27.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 94,566 Tokeni za matokeo 25,426 Tokeni za hoja 0 Muda wa majibu (wastani) 20.72s Muda wa majibu (jumla) 455.81s Muda wa majibu (upeo) 387.15s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Muundo wa ziada: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 5.0 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#234#234	Laguna S 2.1high	5.4	Poolside	$0.114 ↓	111.60s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 27.3% Majaribio yasiyo thabiti 5 Tokeni za ingizo 208,937 Tokeni za matokeo 175,588 Tokeni za hoja 409,276 Muda wa majibu (wastani) 111.60s Muda wa majibu (jumla) 2455.24s Muda wa majibu (upeo) 1190.11s Jibu lisilo sahihi: 11 Mwito wa zana si sahihi: 2 Hakuna jibu: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.3 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.6 Ufuataji wa maagizo : 4.6 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#238#238	Ling-2.6-1Tnone	5.3	Inclusionai	$0.016 ↑	8.59s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 18.2% Majaribio yasiyo thabiti 0 Tokeni za ingizo 106,423 Tokeni za matokeo 11,555 Tokeni za hoja 0 Muda wa majibu (wastani) 8.59s Muda wa majibu (jumla) 163.20s Muda wa majibu (upeo) 25.72s Jibu lisilo sahihi: 12 Hitilafu ya API: 3 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 3.8 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#240#240	Qwen3.6 35B A3Bnone	5.3	Qwen	$0.051 ↓	5.57s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 28.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 93,990 Tokeni za matokeo 45,905 Tokeni za hoja 0 Muda wa majibu (wastani) 5.57s Muda wa majibu (jumla) 111.32s Muda wa majibu (upeo) 39.54s Jibu lisilo sahihi: 13 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#250#250	Qwen3.5-9Bnone	5.1	Qwen	$0.021 ↑	19.19s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 19.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 144,416 Tokeni za matokeo 37,484 Tokeni za hoja 0 Muda wa majibu (wastani) 19.19s Muda wa majibu (jumla) 422.25s Muda wa majibu (upeo) 382.06s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#252#252	North Mini Codenone	5.1	Cohere	$0.000	29.95s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 8.7 Kiwango cha kupita kwa kila jaribio 18.2% Majaribio yasiyo thabiti 0 Tokeni za ingizo 130,501 Tokeni za matokeo 26,786 Tokeni za hoja 0 Muda wa majibu (wastani) 29.95s Muda wa majibu (jumla) 658.83s Muda wa majibu (upeo) 159.85s Jibu lisilo sahihi: 12 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#259#259	Mercury 2.5 Previewnone	4.9	Inception	$0.018	3.51s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.3% Majaribio yasiyo thabiti 5 Tokeni za ingizo 130,296 Tokeni za matokeo 82,585 Tokeni za hoja 0 Muda wa majibu (wastani) 3.51s Muda wa majibu (jumla) 77.28s Muda wa majibu (upeo) 60.70s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.8 Uandishi wa msimbo : 4.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#265#265	GPT-5.4 Nanonone	4.8	OpenAI	$0.041	2.56s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 27.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 115,933 Tokeni za matokeo 13,794 Tokeni za hoja 0 Muda wa majibu (wastani) 2.56s Muda wa majibu (jumla) 56.37s Muda wa majibu (upeo) 25.50s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#275#275	Mercury 2none	4.7	Inception	$0.030	825ms
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.2% Majaribio yasiyo thabiti 2 Tokeni za ingizo 89,637 Tokeni za matokeo 9,584 Tokeni za hoja 0 Muda wa majibu (wastani) 825ms Muda wa majibu (jumla) 18.14s Muda wa majibu (upeo) 4.52s Jibu lisilo sahihi: 17 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.4 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#276#276	Granite 4.2 8Bhigh	4.6	IBM Granite	$0.084	235.89s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 7.6 Kiwango cha kupita kwa kila jaribio 39.4% Majaribio yasiyo thabiti 10 Tokeni za ingizo 43,278 Tokeni za matokeo 181,083 Tokeni za hoja 431,132 Muda wa majibu (wastani) 235.89s Muda wa majibu (jumla) 5189.64s Muda wa majibu (upeo) 685.87s Muda umeisha: 10 Jibu lisilo sahihi: 6 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 3.8 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 3.8 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#283#283	GLM 4.7 Flashmedium	4.3	Z.ai	$0.168	134.34s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 8.6 Kiwango cha kupita kwa kila jaribio 31.8% Majaribio yasiyo thabiti 8 Tokeni za ingizo 79,104 Tokeni za matokeo 42,254 Tokeni za hoja 377,280 Muda wa majibu (wastani) 134.34s Muda wa majibu (jumla) 2015.13s Muda wa majibu (upeo) 1539.97s Jibu lisilo sahihi: 9 Hakuna jibu: 3 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Muda umeisha: 2 Mbinu za kupinga AI : 4.7 Uandishi wa msimbo : 3.2 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.5 Akili ya jumla : 3.6 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#295#295	Ling 3.0 Tinyhigh	3.8	Inclusionai	$0.000	75.68s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 115,314 Tokeni za matokeo 133,965 Tokeni za hoja 816,718 Muda wa majibu (wastani) 75.68s Muda wa majibu (jumla) 1589.20s Muda wa majibu (upeo) 345.15s Hakuna jibu: 7 Jibu lisilo sahihi: 6 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.4 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#296#296	Ling 3.0 Tinylow	3.8	Inclusionai	$0.000	66.16s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 19.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 99,662 Tokeni za matokeo 146,555 Tokeni za hoja 732,977 Muda wa majibu (wastani) 66.16s Muda wa majibu (jumla) 1389.33s Muda wa majibu (upeo) 252.08s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.8 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 6.6 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#299#299	Ling 3.0 Tinymedium	3.8	Inclusionai	$0.000	68.08s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 24.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 103,898 Tokeni za matokeo 148,304 Tokeni za hoja 774,972 Muda wa majibu (wastani) 68.08s Muda wa majibu (jumla) 1429.66s Muda wa majibu (upeo) 262.20s Hakuna jibu: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 4 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.8 Ufuataji wa maagizo : 6.8 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#297#297	Grok 4.1 Fastnone	3.8	X AI	$0.008 ↓	1.62s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 19.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 36,608 Tokeni za matokeo 1,723 Tokeni za hoja 0 Muda wa majibu (wastani) 1.62s Muda wa majibu (jumla) 19.48s Muda wa majibu (upeo) 5.51s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 3 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 1.8 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#222#222	Hy4 previewlow	5.6	Tencent	$1.745	214.25s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 5.4 Kiwango cha kupita kwa kila jaribio 19.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 45,154 Tokeni za matokeo 4,022 Tokeni za hoja 678,516 Muda wa majibu (wastani) 214.25s Muda wa majibu (jumla) 4713.56s Muda wa majibu (upeo) 597.45s Hitilafu ya API: 14 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 6.0 Uandishi wa msimbo : 5.2 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 8.7 Mahususi kwa domeni : 4.5 Akili ya jumla : 7.5 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#241#241	Dots 3 Note Previewnone	5.2	Dots Studio	$0.000	3.53s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 16.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 116,155 Tokeni za matokeo 19,679 Tokeni za hoja 0 Muda wa majibu (wastani) 3.53s Muda wa majibu (jumla) 77.68s Muda wa majibu (upeo) 24.48s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 4.8 Utatuzi wa mafumbo : 3.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#255#255	Laguna S 2.1low	5.0	Poolside	$0.082 ↓	85.34s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 22.7% Majaribio yasiyo thabiti 5 Tokeni za ingizo 118,752 Tokeni za matokeo 67,823 Tokeni za hoja 383,885 Muda wa majibu (wastani) 85.34s Muda wa majibu (jumla) 1877.49s Muda wa majibu (upeo) 814.73s Jibu lisilo sahihi: 15 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 3.8 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 4.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#262#262	Hy4 previewnone	4.8	Tencent	$0.041	39.24s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 4.3 Kiwango cha kupita kwa kila jaribio 16.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 26,376 Tokeni za matokeo 7,306 Tokeni za hoja 0 Muda wa majibu (wastani) 39.24s Muda wa majibu (jumla) 863.30s Muda wa majibu (upeo) 95.32s Jibu lisilo sahihi: 9 Hitilafu ya API: 7 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mbinu za kupinga AI : 3.3 Uandishi wa msimbo : 3.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 8.7 Mahususi kwa domeni : 6.8 Akili ya jumla : 5.1 Ufuataji wa maagizo : 7.0 Utatuzi wa mafumbo : 4.6 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#277#277	Qwen3 Coder Nextmedium	4.6	Qwen	$0.034 ↑	9.07s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 25.8% Majaribio yasiyo thabiti 4 Tokeni za ingizo 148,203 Tokeni za matokeo 19,069 Tokeni za hoja 0 Muda wa majibu (wastani) 9.07s Muda wa majibu (jumla) 154.19s Muda wa majibu (upeo) 81.80s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 3 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 6.3 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#285#285	Granite 4.2 8Bnone	4.3	IBM Granite	$0.026	86.27s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 8.6 Kiwango cha kupita kwa kila jaribio 16.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 57,786 Tokeni za matokeo 130,805 Tokeni za hoja 0 Muda wa majibu (wastani) 86.27s Muda wa majibu (jumla) 1897.96s Muda wa majibu (upeo) 747.17s Jibu lisilo sahihi: 11 Muundo wa ziada: 4 Muda umeisha: 3 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 4.9 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 3.0 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#293#293	Nemotron 3.5 Lightningnone	4.0	NVIDIA	$0.007 ↕	1.21s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 16.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 74,074 Tokeni za matokeo 2,731 Tokeni za hoja 0 Muda wa majibu (wastani) 1.21s Muda wa majibu (jumla) 26.62s Muda wa majibu (upeo) 6.30s Jibu lisilo sahihi: 16 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.1 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#298#298	Qwen3.5-9Bmedium	3.8	Qwen	$0.062 ↑	107.51s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 19 Uaminifu 6.0 Kiwango cha kupita kwa kila jaribio 25.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 17,195 Tokeni za matokeo 46,735 Tokeni za hoja 366,707 Muda wa majibu (wastani) 107.51s Muda wa majibu (jumla) 1720.15s Muda wa majibu (upeo) 569.97s Muda umeisha: 11 Hakuna jibu: 3 Jibu lisilo sahihi: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 5.1 Uandishi wa msimbo : 2.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.6 Mahususi kwa domeni : 3.6 Akili ya jumla : 2.8 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-5.6 Sollow GPT-5.6 SollowvsGemini 3 Flash Previewmedium Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3.5 FlashhighvsGemini 3.7 Flashmedium Gemini 3.7 FlashmediumvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low GPT-5.5lowvsGrok 4.6high Grok 4.6highvsGemini 3.1 Pro Previewmedium Gemini 3.1 Pro PreviewmediumvsGemini 3.7 Flashlow