AI BENCHY

Ubao wa Viwango wa Benchmark ya AI

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-06-03 Modeli zilizotathminiwa: 161

161/161

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#66#66	Step 3.7 Flashhigh	7.2	Stepfun	$0.960	49.43s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 35,763 Tokeni za matokeo 828,084 Tokeni za hoja 0 Muda wa majibu (wastani) 49.43s Muda wa majibu (jumla) 988.58s Muda wa majibu (upeo) 192.75s Jibu lisilo sahihi: 6 Hakuna jibu: 3 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 3.7 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 5.5 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#67#67	MiniMax M3medium	7.2	Minimax	$0.120	68.44s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 65.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 43,447 Tokeni za matokeo 46,884 Tokeni za hoja 85,935 Muda wa majibu (wastani) 68.44s Muda wa majibu (jumla) 1300.32s Muda wa majibu (upeo) 431.03s Muda umeisha: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 5.5 Uandishi wa msimbo : 6.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.5 Akili ya jumla : 5.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#68#68	GPT-5 Minimedium	7.2	OpenAI	$0.149	23.75s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 61.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 34,481 Tokeni za matokeo 6,723 Tokeni za hoja 63,082 Muda wa majibu (wastani) 23.75s Muda wa majibu (jumla) 475.03s Muda wa majibu (upeo) 88.15s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 3 Muda umeisha: 1 Mbinu za kupinga AI : 7.1 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 4.5 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#69#69	Qwen3.6 Max Previewnone	7.1	Qwen	$0.072 ↓	3.31s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 61.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 39,668 Tokeni za matokeo 4,773 Tokeni za hoja 0 Muda wa majibu (wastani) 3.31s Muda wa majibu (jumla) 66.17s Muda wa majibu (upeo) 20.51s Jibu lisilo sahihi: 9 Mbinu za kupinga AI : 5.2 Uandishi wa msimbo : 4.2 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#70#70	MiMo-V2-Flashmedium	7.1	Xiaomi	$0.040 ↑	20.28s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 37,474 Tokeni za matokeo 12,458 Tokeni za hoja 115,182 Muda wa majibu (wastani) 20.28s Muda wa majibu (jumla) 283.87s Muda wa majibu (upeo) 96.01s Jibu lisilo sahihi: 5 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Mbinu za kupinga AI : 8.1 Uandishi wa msimbo : 4.1 Mchanganyiko : 9.8 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#71#71	Seed-2.0-Minimedium	7.1	Bytedance Seed	$0.044	80.22s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 60.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 41,904 Tokeni za matokeo 2,555 Tokeni za hoja 95,974 Muda wa majibu (wastani) 80.22s Muda wa majibu (jumla) 1363.72s Muda wa majibu (upeo) 262.83s Muda umeisha: 4 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 6.6 Uandishi wa msimbo : 6.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#72#72	Claude Sonnet 4.6none	7.0	Anthropic	$0.306	5.27s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 58.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 54,721 Tokeni za matokeo 9,450 Tokeni za hoja 0 Muda wa majibu (wastani) 5.27s Muda wa majibu (jumla) 68.50s Muda wa majibu (upeo) 23.84s Muundo wa ziada: 4 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 6.8 Mchanganyiko : 9.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 7.7 Akili ya jumla : 6.1 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#73#73	Grok 4.20medium	7.0	X AI	$0.450 ↓	19.08s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 61.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 41,511 Tokeni za matokeo 1,816 Tokeni za hoja 157,251 Muda wa majibu (wastani) 19.08s Muda wa majibu (jumla) 381.60s Muda wa majibu (upeo) 105.80s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mbinu za kupinga AI : 8.2 Uandishi wa msimbo : 4.4 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.9 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#74#74	Ring-2.6-1Tmedium	7.0	Inclusionai	$0.033	61.29s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 35,892 Tokeni za matokeo 21,752 Tokeni za hoja 42,754 Muda wa majibu (wastani) 61.29s Muda wa majibu (jumla) 1164.50s Muda wa majibu (upeo) 304.19s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.5 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.1 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#76#76	Hy3 previewhigh	6.9	Tencent	$0.048	56.57s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 9 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 58.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 25,987 Tokeni za matokeo 216,719 Tokeni za hoja 0 Muda wa majibu (wastani) 56.57s Muda wa majibu (jumla) 848.59s Muda wa majibu (upeo) 149.94s Hitilafu ya API: 6 Jibu lisilo sahihi: 3 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 6.5 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#61#61	Gemini 3.1 Flash Litehigh	7.3	Google	$2.044	61.96s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.5% Majaribio yasiyo thabiti 4 Tokeni za ingizo 29,134 Tokeni za matokeo 1,984 Tokeni za hoja 1,355,583 Muda wa majibu (wastani) 61.96s Muda wa majibu (jumla) 1115.31s Muda wa majibu (upeo) 149.23s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 5.7 Mwito wa zana : 10.0
#55#55	Step 3.5 Flashmedium	7.4	Stepfun	$0.062 ↑	43.20s
Tazama kadi ya modeli Jumla ya majaribio 19 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 59.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 33,555 Tokeni za matokeo 90,478 Tokeni za hoja 173,544 Muda wa majibu (wastani) 43.20s Muda wa majibu (jumla) 561.54s Muda wa majibu (upeo) 170.45s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 3.5 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.3 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#41#41	Qwen3.6 Flashmedium	7.6	Qwen	$0.272 ↓	18.97s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 71.7% Majaribio yasiyo thabiti 4 Tokeni za ingizo 39,527 Tokeni za matokeo 2,974 Tokeni za hoja 231,797 Muda wa majibu (wastani) 18.97s Muda wa majibu (jumla) 379.49s Muda wa majibu (upeo) 122.87s Jibu lisilo sahihi: 7 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 5.1 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.8 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#42#42	DeepSeek V4 Flashhigh	7.6	DeepSeek	$0.027 ↓	46.36s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 73.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 37,156 Tokeni za matokeo 10,302 Tokeni za hoja 115,740 Muda wa majibu (wastani) 46.36s Muda wa majibu (jumla) 927.27s Muda wa majibu (upeo) 218.13s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 6.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 4.1 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#43#43	MiMo-V2.5-Promedium	7.6	Xiaomi	$0.090 ↓	21.79s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 39,096 Tokeni za matokeo 5,004 Tokeni za hoja 80,295 Muda wa majibu (wastani) 21.79s Muda wa majibu (jumla) 435.79s Muda wa majibu (upeo) 130.77s Muundo wa ziada: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.5 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#45#45	Qwen3.5-Flashmedium	7.6	Qwen	$0.074 ↓	63.04s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 75.0% Majaribio yasiyo thabiti 5 Tokeni za ingizo 37,036 Tokeni za matokeo 2,074 Tokeni za hoja 272,063 Muda wa majibu (wastani) 63.04s Muda wa majibu (jumla) 1197.71s Muda wa majibu (upeo) 234.29s Muda umeisha: 3 Jibu lisilo sahihi: 3 Hitilafu ya API: 1 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.1 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 6.1 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#46#46	Mimo V2 PROmedium	7.6	Xiaomi	$0.333 ↑	22.16s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 76.7% Majaribio yasiyo thabiti 5 Tokeni za ingizo 40,961 Tokeni za matokeo 2,518 Tokeni za hoja 81,801 Muda wa majibu (wastani) 22.16s Muda wa majibu (jumla) 443.22s Muda wa majibu (upeo) 136.29s Jibu lisilo sahihi: 5 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Muda umeisha: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 7.5 Mchanganyiko : 4.7 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#48#48	Qwen3.5 Plus 2026-04-20medium	7.5	Qwen	$0.287 ↓	43.65s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 39,262 Tokeni za matokeo 2,259 Tokeni za hoja 150,249 Muda wa majibu (wastani) 43.65s Muda wa majibu (jumla) 872.90s Muda wa majibu (upeo) 189.38s Jibu lisilo sahihi: 8 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.3 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.9 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#49#49	Gemini 3.1 Flash Lite Previewnone	7.5	Google	$0.017	1.23s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 34,579 Tokeni za matokeo 5,541 Tokeni za hoja 0 Muda wa majibu (wastani) 1.23s Muda wa majibu (jumla) 24.68s Muda wa majibu (upeo) 3.39s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 7.5 Uandishi wa msimbo : 6.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#50#50	Kimi K2.6medium	7.4	Moonshot AI	$0.803 ↓	54.03s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 28,584 Tokeni za matokeo 102,208 Tokeni za hoja 229,120 Muda wa majibu (wastani) 54.03s Muda wa majibu (jumla) 1026.57s Muda wa majibu (upeo) 215.85s Jibu lisilo sahihi: 3 Hakufuata maelekezo: 2 Muda umeisha: 2 Hakuna jibu: 1 Mbinu za kupinga AI : 7.0 Uandishi wa msimbo : 6.8 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#51#51	Gemini 3.1 Flash Litelow	7.4	Google	$0.026	1.92s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 33,889 Tokeni za matokeo 2,726 Tokeni za hoja 8,951 Muda wa majibu (wastani) 1.92s Muda wa majibu (jumla) 38.45s Muda wa majibu (upeo) 5.66s Jibu lisilo sahihi: 8 Mbinu za kupinga AI : 7.3 Uandishi wa msimbo : 6.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#52#52	GLM 5.1medium	7.4	Z.ai	$0.279 ↓	33.45s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 5.0 Kiwango cha kupita kwa kila jaribio 68.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 30,397 Tokeni za matokeo 11,511 Tokeni za hoja 71,979 Muda wa majibu (wastani) 33.45s Muda wa majibu (jumla) 635.63s Muda wa majibu (upeo) 172.60s Jibu lisilo sahihi: 4 Muda umeisha: 2 Hitilafu ya API: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 4.6 Mchanganyiko : 9.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#53#53	GPT-5.3 Chatnone	7.4	OpenAI	$0.402	6.13s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.3% Majaribio yasiyo thabiti 4 Tokeni za ingizo 31,590 Tokeni za matokeo 24,757 Tokeni za hoja 0 Muda wa majibu (wastani) 6.13s Muda wa majibu (jumla) 122.61s Muda wa majibu (upeo) 18.33s Jibu lisilo sahihi: 6 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 6.7 Uandishi wa msimbo : 6.9 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.5 Akili ya jumla : 4.6 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#54#54	MiMo-V2.5medium	7.4	Xiaomi	$0.052 ↓	20.35s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 70.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 39,201 Tokeni za matokeo 2,806 Tokeni za hoja 161,888 Muda wa majibu (wastani) 20.35s Muda wa majibu (jumla) 406.94s Muda wa majibu (upeo) 97.49s Jibu lisilo sahihi: 4 Muundo wa ziada: 2 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.9 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 2.7 Mahususi kwa domeni : 5.3 Akili ya jumla : 5.4 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 8.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#56#56	Step 3.7 Flashlow	7.4	Stepfun	$0.336	16.06s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 68.3% Majaribio yasiyo thabiti 3 Tokeni za ingizo 37,458 Tokeni za matokeo 285,209 Tokeni za hoja 0 Muda wa majibu (wastani) 16.06s Muda wa majibu (jumla) 321.11s Muda wa majibu (upeo) 124.75s Jibu lisilo sahihi: 7 Hakuna jibu: 1 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.4 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 5.5 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#58#58	Qwen3.6 35B A3Bmedium	7.3	Qwen	$0.130 ↑	17.26s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 61.7% Majaribio yasiyo thabiti 1 Tokeni za ingizo 13,550 Tokeni za matokeo 18,304 Tokeni za hoja 115,531 Muda wa majibu (wastani) 17.26s Muda wa majibu (jumla) 310.65s Muda wa majibu (upeo) 86.11s Jibu lisilo sahihi: 4 Hitilafu ya API: 2 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 6.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.4 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 8.0 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#59#59	GPT-5.2medium	7.3	OpenAI	$0.492	16.50s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 70.0% Majaribio yasiyo thabiti 4 Tokeni za ingizo 31,348 Tokeni za matokeo 2,880 Tokeni za hoja 28,289 Muda wa majibu (wastani) 16.50s Muda wa majibu (jumla) 214.45s Muda wa majibu (upeo) 77.80s Hakufuata maelekezo: 3 Jibu lisilo sahihi: 3 Hakuna jibu: 1 Muda umeisha: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 10.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 3.7 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.5 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#62#62	Claude Opus 4.8none	7.3	Anthropic	$0.519	3.51s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 65.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 63,282 Tokeni za matokeo 8,098 Tokeni za hoja 0 Muda wa majibu (wastani) 3.51s Muda wa majibu (jumla) 70.19s Muda wa majibu (upeo) 17.73s Muundo wa ziada: 3 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Hakuna jibu: 1 Mbinu za kupinga AI : 6.5 Uandishi wa msimbo : 6.8 Mchanganyiko : 9.5 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 10.0 Ufuataji wa maagizo : 9.9 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#64#64	Claude Opus 4.6medium	7.2	Anthropic	$1.896	25.45s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 63.3% Majaribio yasiyo thabiti 2 Tokeni za ingizo 50,062 Tokeni za matokeo 42,254 Tokeni za hoja 23,554 Muda wa majibu (wastani) 25.45s Muda wa majibu (jumla) 330.91s Muda wa majibu (upeo) 83.40s Muundo wa ziada: 4 Jibu lisilo sahihi: 3 Hakufuata maelekezo: 1 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 7.2 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 10.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#20#20	Seed-2.0-Litemedium	8.1	Bytedance Seed	$0.152	36.67s
Tazama kadi ya modeli Jumla ya majaribio 20 Majaribio yenye makosa 7 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 75.0% Majaribio yasiyo thabiti 3 Tokeni za ingizo 43,785 Tokeni za matokeo 3,224 Tokeni za hoja 67,040 Muda wa majibu (wastani) 36.67s Muda wa majibu (jumla) 733.46s Muda wa majibu (upeo) 168.71s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 7.0 Mchanganyiko : 10.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.9 Akili ya jumla : 6.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 9.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Ulinganisho wa haraka

Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashlow Gemini 3 Flash PreviewmediumvsGemini 3.1 Pro Previewmedium Gemini 3 Flash PreviewmediumvsQwen3.7 Maxmedium Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashmedium Gemini 3 Flash PreviewmediumvsClaude Opus 4.7medium Gemini 3 Flash PreviewmediumvsRing-2.6-1Tmedium Gemini 3 Flash PreviewmediumvsOwl Alphamedium Gemini 3.5 FlashhighvsGemini 3.5 Flashlow Gemini 3.5 FlashlowvsGemini 3.1 Pro Previewmedium Gemini 3.1 Pro PreviewmediumvsQwen3.7 Maxmedium Qwen3.7 MaxmediumvsGemini 3.5 Flashmedium

Ubao wa Viwango wa Benchmark ya AI

Chuja miundo

Ulinganisho wa haraka