Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-17 Modeli zilizotathminiwa: 442

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

442/442

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#232#232	Qwen3.5-122B-A10Bnone	6.4	Qwen	$0.308 ↓	14.79s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 2 Tokeni za ingizo 405,921 Tokeni za matokeo 97,112 Tokeni za hoja 0 Muda wa majibu (wastani) 14.79s Muda wa majibu (jumla) 340.25s Muda wa majibu (upeo) 212.63s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.7 Mchanganyiko : 5.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.8 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#152#152	GLM 5.3 FlashXhigh	7.4	Z.ai	$0.210	14.94s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 69.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 235,914 Tokeni za matokeo 8,147 Tokeni za hoja 89,581 Muda wa majibu (wastani) 14.94s Muda wa majibu (jumla) 343.65s Muda wa majibu (upeo) 91.16s Jibu lisilo sahihi: 8 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 8.2 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 3.6 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#72#72	Claude Sonnet 5.5xhigh	8.6	Anthropic	$1.516	14.98s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 79.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 342,579 Tokeni za matokeo 12,848 Tokeni za hoja 70,193 Muda wa majibu (wastani) 14.98s Muda wa majibu (jumla) 344.60s Muda wa majibu (upeo) 54.92s Jibu lisilo sahihi: 3 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.2 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 6.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#78#78	Claude Sonnet 5medium	8.5	Anthropic	$1.438	15.01s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 76.8% Majaribio yasiyo thabiti 3 Tokeni za ingizo 353,658 Tokeni za matokeo 54,891 Tokeni za hoja 18,370 Muda wa majibu (wastani) 15.01s Muda wa majibu (jumla) 345.16s Muda wa majibu (upeo) 69.26s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 9.0 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.8 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#9#9	Gemini 3.7 Flashhigh	9.8	Google	$0.528	15.10s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 2 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 95.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 233,400 Tokeni za matokeo 6,922 Tokeni za hoja 173,178 Muda wa majibu (wastani) 15.10s Muda wa majibu (jumla) 347.23s Muda wa majibu (upeo) 91.63s Jibu lisilo sahihi: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.8 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#227#227	GLM 5.3low	6.5	Z.ai	$0.215 ↓	15.18s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 247,871 Tokeni za matokeo 10,791 Tokeni za hoja 17,315 Muda wa majibu (wastani) 15.18s Muda wa majibu (jumla) 349.06s Muda wa majibu (upeo) 83.60s Jibu lisilo sahihi: 8 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 5.2 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 6.2 Mchanganyiko : 3.8 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#331#331	KAT Coder AIR V2.5high	5.2	Kwaipilot	$0.077	15.23s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 5 Tokeni za ingizo 50,423 Tokeni za matokeo 4,144 Tokeni za hoja 110,510 Muda wa majibu (wastani) 15.23s Muda wa majibu (jumla) 350.26s Muda wa majibu (upeo) 118.35s Jibu lisilo sahihi: 9 Hitilafu ya API: 4 Muundo wa ziada: 3 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 4.3 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#389#389	Qwen3.6 Plus Previewmedium	4.0	Qwen	$0.000	15.25s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 10 Uaminifu Haipo Kiwango cha kupita kwa kila jaribio 39.1% Majaribio yasiyo thabiti 0 Tokeni za ingizo 32,639 Tokeni za matokeo 1,153 Tokeni za hoja 62,197 Muda wa majibu (wastani) 15.25s Muda wa majibu (jumla) 182.96s Muda wa majibu (upeo) 43.55s Hitilafu ya API: 8 Jibu lisilo sahihi: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 1.0 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#12#12	GPT-6.1 Solhigh	9.6	OpenAI	$0.755	15.46s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 2 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 94.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 174,960 Tokeni za matokeo 5,780 Tokeni za hoja 34,728 Muda wa majibu (wastani) 15.46s Muda wa majibu (jumla) 355.66s Muda wa majibu (upeo) 139.76s Jibu lisilo sahihi: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 4.7
#308#308	Ling 3.1 Flashnone	5.5	Inclusionai	$0.000	15.75s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 5 Tokeni za ingizo 286,758 Tokeni za matokeo 85,777 Tokeni za hoja 0 Muda wa majibu (wastani) 15.75s Muda wa majibu (jumla) 362.23s Muda wa majibu (upeo) 90.95s Jibu lisilo sahihi: 9 Hakufuata maelekezo: 5 Hakuna jibu: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 4.5 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 8.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#397#397	Nemotron 3.5 Lightningnone	3.8	NVIDIA	$0.009 ↕	15.92s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 2 Tokeni za ingizo 97,418 Tokeni za matokeo 4,779 Tokeni za hoja 0 Muda wa majibu (wastani) 15.92s Muda wa majibu (jumla) 366.20s Muda wa majibu (upeo) 339.57s Jibu lisilo sahihi: 16 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Muda umeisha: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 3.1 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#110#110	GPT-5.4 Nanomedium	8.0	OpenAI	$0.235 ↑	15.95s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 237,088 Tokeni za matokeo 8,235 Tokeni za hoja 102,675 Muda wa majibu (wastani) 15.95s Muda wa majibu (jumla) 366.93s Muda wa majibu (upeo) 94.06s Jibu lisilo sahihi: 8 Hakufuata maelekezo: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 6.1 Mchanganyiko : 9.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.5 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 4.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#40#40	Muse Wonderlow	9.1	Meta	$2.637	16.00s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 6 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 76.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 244,997 Tokeni za matokeo 11,148 Tokeni za hoja 71,699 Muda wa majibu (wastani) 16.00s Muda wa majibu (jumla) 367.91s Muda wa majibu (upeo) 83.98s Jibu lisilo sahihi: 4 Hitilafu ya API: 2 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 9.8 Maarifa ya jumla : 3.0
#321#321	Hy3 previewmedium	5.3	Tencent	$0.049 ↕	16.28s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.9% Majaribio yasiyo thabiti 0 Tokeni za ingizo 27,030 Tokeni za matokeo 73,544 Tokeni za hoja 0 Muda wa majibu (wastani) 16.28s Muda wa majibu (jumla) 293.12s Muda wa majibu (upeo) 46.04s Hitilafu ya API: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#187#187	Grok 4.6low	6.9	X AI	$0.781	16.44s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 66.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 263,427 Tokeni za matokeo 6,006 Tokeni za hoja 36,309 Muda wa majibu (wastani) 16.44s Muda wa majibu (jumla) 378.14s Muda wa majibu (upeo) 57.97s Jibu lisilo sahihi: 8 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.5 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#38#38	Claude Haiku 5.5xhigh	9.1	Anthropic	$0.140	16.58s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 5 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 81.2% Majaribio yasiyo thabiti 2 Tokeni za ingizo 394,509 Tokeni za matokeo 10,349 Tokeni za hoja 188,919 Muda wa majibu (wastani) 16.58s Muda wa majibu (jumla) 381.40s Muda wa majibu (upeo) 92.74s Jibu lisilo sahihi: 2 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#289#289	DeepSeek V4.1 Flashnone	5.8	DeepSeek	$0.391 ↑	16.63s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 16 Uaminifu 9.7 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 3 Tokeni za ingizo 337,756 Tokeni za matokeo 292,779 Tokeni za hoja 0 Muda wa majibu (wastani) 16.63s Muda wa majibu (jumla) 382.53s Muda wa majibu (upeo) 247.66s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 7.4 Mbinu za kupinga AI : 3.7 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 7.7 Akili ya jumla : 5.5 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#111#111	Gemini 3.8 Flashmedium	8.0	Google	$0.769	16.64s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 4 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 89.9% Majaribio yasiyo thabiti 3 Tokeni za ingizo 187,331 Tokeni za matokeo 7,555 Tokeni za hoja 159,931 Muda wa majibu (wastani) 16.64s Muda wa majibu (jumla) 382.64s Muda wa majibu (upeo) 108.60s Jibu lisilo sahihi: 2 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 8.0 Mchanganyiko : 8.7 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 8.2 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 10.0
#95#95	Claude Opus 4.8medium	8.3	Anthropic	$3.490	16.72s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 6 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 82.6% Majaribio yasiyo thabiti 3 Tokeni za ingizo 360,294 Tokeni za matokeo 43,441 Tokeni za hoja 24,401 Muda wa majibu (wastani) 16.72s Muda wa majibu (jumla) 384.66s Muda wa majibu (upeo) 99.37s Jibu lisilo sahihi: 5 Hakuna jibu: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 9.9 Uchanganuzi na uchimbaji wa data : 7.1 Mahususi kwa domeni : 3.6 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#57#57	Claude Fable 5medium	8.9	Anthropic	$5.089	16.84s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 5 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 79.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 272,411 Tokeni za matokeo 35,497 Tokeni za hoja 11,788 Muda wa majibu (wastani) 16.84s Muda wa majibu (jumla) 387.26s Muda wa majibu (upeo) 80.80s Hakuna jibu: 3 Mwito wa zana si sahihi: 1 Jibu lisilo sahihi: 1 Kazi za mawakala : 10.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 10.0 Mchanganyiko : 6.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#363#363	Qwen3 Coder Nextmedium	4.7	Qwen	$0.071 ↑	16.97s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 311,647 Tokeni za matokeo 40,395 Tokeni za hoja 0 Muda wa majibu (wastani) 16.97s Muda wa majibu (jumla) 305.55s Muda wa majibu (upeo) 151.35s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 3 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 6.3 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#156#156	Inklingmedium	7.4	Thinkingmachines	$0.527 ↓	16.98s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 75.4% Majaribio yasiyo thabiti 5 Tokeni za ingizo 257,138 Tokeni za matokeo 13,830 Tokeni za hoja 55,775 Muda wa majibu (wastani) 16.98s Muda wa majibu (jumla) 390.45s Muda wa majibu (upeo) 85.12s Jibu lisilo sahihi: 5 Mwito wa zana si sahihi: 2 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 8.4 Mchanganyiko : 7.3 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 3.0 Maarifa ya jumla : 2.8
#420#420	Nemotron 3 Nano Omni 30b A3b Reasoningmedium	2.7	NVIDIA	$0.000	17.13s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 15 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 5 Tokeni za ingizo 11,661 Tokeni za matokeo 48,491 Tokeni za hoja 180,695 Muda wa majibu (wastani) 17.13s Muda wa majibu (jumla) 222.66s Muda wa majibu (upeo) 147.45s Jibu lisilo sahihi: 7 Hitilafu ya API: 6 Hakufuata maelekezo: 1 Hakuna jibu: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 1.1 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#169#169	Claude Opus 4.8low	7.2	Anthropic	$3.787	17.13s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 78.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 409,947 Tokeni za matokeo 46,060 Tokeni za hoja 23,429 Muda wa majibu (wastani) 17.13s Muda wa majibu (jumla) 394.01s Muda wa majibu (upeo) 127.97s Jibu lisilo sahihi: 5 Muundo wa ziada: 1 Hakuna jibu: 1 Kazi za mawakala : 4.7 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.6 Mchanganyiko : 9.9 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#313#313	Seed-2.0-Codenone	5.4	Bytedance Seed	$0.257	17.51s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.0 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 6 Tokeni za ingizo 319,668 Tokeni za matokeo 32,069 Tokeni za hoja 0 Muda wa majibu (wastani) 17.51s Muda wa majibu (jumla) 402.66s Muda wa majibu (upeo) 132.84s Jibu lisilo sahihi: 12 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 6.1 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.2 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow