Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-09-02 Modeli zilizotathminiwa: 311

Miundo inayopendekezwa

GPT-5.6 Sol high Yenye akili Kiwango cha kupita kwa kila jaribio 89.4% Majaribio sahihi 18 / 22 Alama 9.4/10 GPT-5.6 Luna medium Haraka Muda wa majibu (wastani) 7.43s Jumla ya tokeni za matokeo 44,525 Alama 7.4/10 DeepSeek V4 Flash 0731 high Nafuu Bei ya ingizo $0.065 / 1M Bei ya toleo $0.180 / 1M Alama 8.0/10

311/311

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#177#177	MiMo-V2-Flashmedium	6.3	Xiaomi	$0.043 ↑	20.11s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.1% Majaribio yasiyo thabiti 3 Tokeni za ingizo 40,111 Tokeni za matokeo 12,476 Tokeni za hoja 125,039 Muda wa majibu (wastani) 20.11s Muda wa majibu (jumla) 301.59s Muda wa majibu (upeo) 96.01s Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.1 Uandishi wa msimbo : 6.0 Mchanganyiko : 4.9 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#143#143	Solar Pro 4low	6.8	Upstage	$0.044	136.11s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 6 Tokeni za ingizo 90,556 Tokeni za matokeo 6,153 Tokeni za hoja 332,220 Muda wa majibu (wastani) 136.11s Muda wa majibu (jumla) 2994.49s Muda wa majibu (upeo) 640.89s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.0 Utatuzi wa mafumbo : 9.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#61#61	DeepSeek V4 Flash 0731low	8.0	DeepSeek	$0.044 ↓	77.55s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 5 Tokeni za ingizo 93,345 Tokeni za matokeo 35,723 Tokeni za hoja 350,266 Muda wa majibu (wastani) 77.55s Muda wa majibu (jumla) 1706.18s Muda wa majibu (upeo) 438.65s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 7.3 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 6.5 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#172#172	LongCat 2.0none	6.4	Meituan	$0.044	5.17s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 40.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 108,752 Tokeni za matokeo 9,375 Tokeni za hoja 0 Muda wa majibu (wastani) 5.17s Muda wa majibu (jumla) 113.83s Muda wa majibu (upeo) 48.38s Jibu lisilo sahihi: 13 Muundo wa ziada: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 4.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#224#224	Mimo V2 PROnone	5.6	Xiaomi	$0.045 ↓	2.27s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 39.4% Majaribio yasiyo thabiti 3 Tokeni za ingizo 39,344 Tokeni za matokeo 2,352 Tokeni za hoja 0 Muda wa majibu (wastani) 2.27s Muda wa majibu (jumla) 45.50s Muda wa majibu (upeo) 6.58s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#235#235	KAT-Coder-Air V2.5low	5.4	Kwaipilot	$0.046	10.63s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 15 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 43.9% Majaribio yasiyo thabiti 6 Tokeni za ingizo 61,094 Tokeni za matokeo 6,532 Tokeni za hoja 53,882 Muda wa majibu (wastani) 10.63s Muda wa majibu (jumla) 233.77s Muda wa majibu (upeo) 86.23s Jibu lisilo sahihi: 7 Muundo wa ziada: 4 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 3.5 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#186#186	Gemini 3.1 Flash Litenone	6.1	Google	$0.046	1.75s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 118,059 Tokeni za matokeo 10,723 Tokeni za hoja 0 Muda wa majibu (wastani) 1.75s Muda wa majibu (jumla) 38.42s Muda wa majibu (upeo) 16.25s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#125#125	Solar Pro 4high	7.1	Upstage	$0.046	120.58s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 62.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 79,740 Tokeni za matokeo 23,357 Tokeni za hoja 339,837 Muda wa majibu (wastani) 120.58s Muda wa majibu (jumla) 2652.77s Muda wa majibu (upeo) 491.07s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 3 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 5.7 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.5 Ufuataji wa maagizo : 7.9 Utatuzi wa mafumbo : 8.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#257#257	GLM 5 Turbonone	5.1	Z.ai	$0.047 ↑	2.82s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 30.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 32,525 Tokeni za matokeo 1,815 Tokeni za hoja 0 Muda wa majibu (wastani) 2.82s Muda wa majibu (jumla) 59.29s Muda wa majibu (upeo) 8.21s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.2 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#182#182	Gemini 3.1 Flash Liteminimal	6.1	Google	$0.047	1.85s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 51.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 119,076 Tokeni za matokeo 11,118 Tokeni za hoja 0 Muda wa majibu (wastani) 1.85s Muda wa majibu (jumla) 40.74s Muda wa majibu (upeo) 12.97s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 3 Hakuna jibu: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#144#144	Solar Pro 4medium	6.8	Upstage	$0.047	127.64s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 62.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 87,902 Tokeni za matokeo 30,743 Tokeni za hoja 335,668 Muda wa majibu (wastani) 127.64s Muda wa majibu (jumla) 2808.09s Muda wa majibu (upeo) 519.91s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 9.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#226#226	KAT-Coder-Air V2.5medium	5.6	Kwaipilot	$0.048	8.65s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 45.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 51,369 Tokeni za matokeo 8,008 Tokeni za hoja 58,568 Muda wa majibu (wastani) 8.65s Muda wa majibu (jumla) 190.35s Muda wa majibu (upeo) 48.19s Jibu lisilo sahihi: 10 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.6 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#167#167	Hy3 previewmedium	6.5	Tencent	$0.049 ↕	16.28s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.6% Majaribio yasiyo thabiti 0 Tokeni za ingizo 27,030 Tokeni za matokeo 73,544 Tokeni za hoja 0 Muda wa majibu (wastani) 16.28s Muda wa majibu (jumla) 293.12s Muda wa majibu (upeo) 46.04s Hitilafu ya API: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#212#212	Nemotron 3 Supermedium	5.7	NVIDIA	$0.050 ↑	52.31s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 14 Uaminifu 9.1 Kiwango cha kupita kwa kila jaribio 40.9% Majaribio yasiyo thabiti 3 Tokeni za ingizo 81,438 Tokeni za matokeo 17,674 Tokeni za hoja 97,900 Muda wa majibu (wastani) 52.31s Muda wa majibu (jumla) 1046.21s Muda wa majibu (upeo) 431.98s Jibu lisilo sahihi: 5 Hitilafu ya API: 4 Hakufuata maelekezo: 3 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 3.1 Mchanganyiko : 6.4 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.1 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#87#87	Solar Pro 4xhigh	7.6	Upstage	$0.050	134.85s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.6% Majaribio yasiyo thabiti 2 Tokeni za ingizo 98,116 Tokeni za matokeo 21,720 Tokeni za hoja 367,730 Muda wa majibu (wastani) 134.85s Muda wa majibu (jumla) 2966.79s Muda wa majibu (upeo) 491.42s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hakuna jibu: 2 Muundo wa ziada: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.4 Utatuzi wa mafumbo : 8.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#246#246	Qwen3.6 35B A3Bnone	5.3	Qwen	$0.051 ↓	5.57s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 28.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 93,990 Tokeni za matokeo 45,905 Tokeni za hoja 0 Muda wa majibu (wastani) 5.57s Muda wa majibu (jumla) 111.32s Muda wa majibu (upeo) 39.54s Jibu lisilo sahihi: 13 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#180#180	GPT-5.6 Lunalow	6.2	OpenAI	$0.051 ↓	5.20s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 12 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 54.5% Majaribio yasiyo thabiti 5 Tokeni za ingizo 96,355 Tokeni za matokeo 8,213 Tokeni za hoja 18,073 Muda wa majibu (wastani) 5.20s Muda wa majibu (jumla) 114.46s Muda wa majibu (upeo) 19.44s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.5 Mchanganyiko : 2.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#168#168	Gemini 3.1 Flash Lite Previewnone	6.4	Google	$0.052	1.56s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 57.6% Majaribio yasiyo thabiti 1 Tokeni za ingizo 120,955 Tokeni za matokeo 14,161 Tokeni za hoja 0 Muda wa majibu (wastani) 1.56s Muda wa majibu (jumla) 34.32s Muda wa majibu (upeo) 9.27s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#221#221	GLM 5V Turbonone	5.6	Z.ai	$0.052	2.99s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 37,100 Tokeni za matokeo 1,766 Tokeni za hoja 0 Muda wa majibu (wastani) 2.99s Muda wa majibu (jumla) 62.74s Muda wa majibu (upeo) 6.51s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.6 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#79#79	Qwen3.7 Flashhigh	7.8	Qwen	$0.052	41.37s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.2% Majaribio yasiyo thabiti 6 Tokeni za ingizo 116,331 Tokeni za matokeo 12,330 Tokeni za hoja 357,920 Muda wa majibu (wastani) 41.37s Muda wa majibu (jumla) 910.11s Muda wa majibu (upeo) 431.47s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 6.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#234#234	Laguna S 2.1medium	5.4	Poolside	$0.053 ↓	58.42s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 86,647 Tokeni za matokeo 97,298 Tokeni za hoja 242,297 Muda wa majibu (wastani) 58.42s Muda wa majibu (jumla) 1285.26s Muda wa majibu (upeo) 560.31s Jibu lisilo sahihi: 13 Mwito wa zana si sahihi: 2 Hakuna jibu: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.3 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.6 Ufuataji wa maagizo : 4.2 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#241#241	Inkling Smallnone	5.3	Thinkingmachines	$0.054 ↓	1.51s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 94,733 Tokeni za matokeo 8,770 Tokeni za hoja 0 Muda wa majibu (wastani) 1.51s Muda wa majibu (jumla) 33.21s Muda wa majibu (upeo) 12.35s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.6 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#262#262	DeepSeek V3.2none	5.0	DeepSeek	$0.054 ↑	17.89s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.4% Majaribio yasiyo thabiti 5 Tokeni za ingizo 135,831 Tokeni za matokeo 42,099 Tokeni za hoja 0 Muda wa majibu (wastani) 17.89s Muda wa majibu (jumla) 393.53s Muda wa majibu (upeo) 115.89s Jibu lisilo sahihi: 8 Hitilafu ya API: 3 Muundo wa ziada: 2 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 3.1 Mchanganyiko : 4.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#214#214	Inkling Smalllow	5.7	Thinkingmachines	$0.055 ↓	2.07s
Tazama kadi ya modeli Jumla ya majaribio 22 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 81,447 Tokeni za matokeo 2,715 Tokeni za hoja 11,971 Muda wa majibu (wastani) 2.07s Muda wa majibu (jumla) 45.64s Muda wa majibu (upeo) 5.82s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.3 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#293#293	Grok 4.20none	4.1	X AI	$0.057 ↓	1.11s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 12 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 27.3% Majaribio yasiyo thabiti 0 Tokeni za ingizo 41,313 Tokeni za matokeo 1,923 Tokeni za hoja 0 Muda wa majibu (wastani) 1.11s Muda wa majibu (jumla) 19.96s Muda wa majibu (upeo) 6.04s Jibu lisilo sahihi: 10 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-5.6 Sollow GPT-5.6 SollowvsGemini 3 Flash Previewmedium Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3.5 FlashhighvsGemini 3.7 Flashmedium Gemini 3.7 FlashmediumvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low GPT-5.5lowvsGrok 4.6high Grok 4.6highvsGemini 3.1 Pro Previewmedium