Ubao wa Viwango wa AI Benchy

Name: Matokeo ya Benchmark ya Modeli za AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-01 Modeli zilizotathminiwa: 382

Miundo inayopendekezwa

GPT-6.1 Sol xhigh Yenye akili Kiwango cha kupita kwa kila jaribio 97.1% Majaribio sahihi 22 / 23 Alama 9.9/10 Gemini 3.7 Flash low Haraka Muda wa majibu (wastani) 6.24s Jumla ya tokeni za matokeo 38,453 Alama 9.4/10 GPT-6 Luna high Nafuu Bei ya ingizo $0.100 / 1M Bei ya toleo $0.500 / 1M Bei ya kusoma akiba $0.010 / 1M Bei ya kuandika akiba $0.125 / 1M Alama 7.7/10

382/382

Nafasi	Modeli	Alama	Kampuni	Jumla ya gharama	Muda wa majibu (wastani)
#332#332	Mimo V2 Omninone	4.5	Xiaomi	$0.021 ↓	2.44s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 40,852 Tokeni za matokeo 3,314 Tokeni za hoja 0 Muda wa majibu (wastani) 2.44s Muda wa majibu (jumla) 48.81s Muda wa majibu (upeo) 6.81s Jibu lisilo sahihi: 10 Hitilafu ya API: 1 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.6 Uandishi wa msimbo : 4.4 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.1 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 10.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#331#331	Ring 2.6 1tnone	4.5	Inclusionai	$0.026 ↑	48.94s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 43.5% Majaribio yasiyo thabiti 2 Tokeni za ingizo 7,608 Tokeni za matokeo 40,277 Tokeni za hoja 0 Muda wa majibu (wastani) 48.94s Muda wa majibu (jumla) 831.92s Muda wa majibu (upeo) 143.82s Hitilafu ya API: 7 Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 9.2 Uandishi wa msimbo : 5.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 3.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#330#330	Hy3 previewlow	4.5	Tencent	$0.042 ↕	24.56s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 2 Tokeni za ingizo 21,045 Tokeni za matokeo 63,460 Tokeni za hoja 0 Muda wa majibu (wastani) 24.56s Muda wa majibu (jumla) 368.35s Muda wa majibu (upeo) 78.74s Hitilafu ya API: 7 Jibu lisilo sahihi: 4 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.3 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.9 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#329#329	Ling 2.6 Flashnone	4.5	Inclusionai	$0.002 ↑	10.21s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 9.6 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 2 Tokeni za ingizo 114,384 Tokeni za matokeo 14,903 Tokeni za hoja 0 Muda wa majibu (wastani) 10.21s Muda wa majibu (jumla) 214.31s Muda wa majibu (upeo) 36.03s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Mwito wa zana si sahihi: 3 Hakufuata maelekezo: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 6.8 Uandishi wa msimbo : 5.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.0 Ufuataji wa maagizo : 9.8 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#328#328	Owl Alphanone	4.6	Openrouter	$0.000	9.88s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 33.3% Majaribio yasiyo thabiti 1 Tokeni za ingizo 42,283 Tokeni za matokeo 5,913 Tokeni za hoja 0 Muda wa majibu (wastani) 9.88s Muda wa majibu (jumla) 207.38s Muda wa majibu (upeo) 47.10s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 3 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 5.6 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#327#327	Mimo V2 PROnone	4.6	Xiaomi	$0.045 ↓	2.27s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 14 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 39,344 Tokeni za matokeo 2,352 Tokeni za hoja 0 Muda wa majibu (wastani) 2.27s Muda wa majibu (jumla) 45.50s Muda wa majibu (upeo) 6.58s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 6.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#326#326	Owl Alphamedium	4.6	Openrouter	$0.000	11.95s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 36.2% Majaribio yasiyo thabiti 1 Tokeni za ingizo 43,478 Tokeni za matokeo 2,974 Tokeni za hoja 0 Muda wa majibu (wastani) 11.95s Muda wa majibu (jumla) 250.88s Muda wa majibu (upeo) 58.63s Jibu lisilo sahihi: 10 Hakufuata maelekezo: 2 Hitilafu ya API: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.4 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.3 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#325#325	Nemotron 3.5 Lightninglow	4.6	NVIDIA	$0.123 ↕	83.19s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.5 Kiwango cha kupita kwa kila jaribio 40.6% Majaribio yasiyo thabiti 9 Tokeni za ingizo 207,883 Tokeni za matokeo 144,718 Tokeni za hoja 525,897 Muda wa majibu (wastani) 83.19s Muda wa majibu (jumla) 1913.41s Muda wa majibu (upeo) 597.61s Jibu lisilo sahihi: 14 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 3.5 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 4.0 Mchanganyiko : 6.3 Uchanganuzi na uchimbaji wa data : 2.9 Mahususi kwa domeni : 3.6 Akili ya jumla : 3.7 Ufuataji wa maagizo : 8.4 Utatuzi wa mafumbo : 3.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#324#324	Laguna S 2.1low	4.6	Poolside	$0.108 ↓	88.24s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 23.2% Majaribio yasiyo thabiti 6 Tokeni za ingizo 232,641 Tokeni za matokeo 69,335 Tokeni za hoja 426,182 Muda wa majibu (wastani) 88.24s Muda wa majibu (jumla) 2029.57s Muda wa majibu (upeo) 814.73s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 3.4 Uandishi wa msimbo : 3.8 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.8 Ufuataji wa maagizo : 4.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#323#323	GLM 5V Turbonone	4.6	Z.ai	$0.052	2.99s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 13 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 0 Tokeni za ingizo 37,100 Tokeni za matokeo 1,766 Tokeni za hoja 0 Muda wa majibu (wastani) 2.99s Muda wa majibu (jumla) 62.74s Muda wa majibu (upeo) 6.51s Jibu lisilo sahihi: 11 Hakufuata maelekezo: 2 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 4.8 Uandishi wa msimbo : 5.5 Mchanganyiko : 1.5 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.6 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.3 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#322#322	Gemini 3.1 Flash Litehigh	4.6	Google	$2.044	61.96s
Tazama kadi ya modeli Jumla ya majaribio 18 Majaribio yenye makosa 8 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 53.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 29,134 Tokeni za matokeo 1,984 Tokeni za hoja 1,355,583 Muda wa majibu (wastani) 61.96s Muda wa majibu (jumla) 1115.31s Muda wa majibu (upeo) 149.23s Jibu lisilo sahihi: 4 Hakufuata maelekezo: 3 Hakuna jibu: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 8.7 Uandishi wa msimbo : 3.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 7.3 Utatuzi wa mafumbo : 5.7 Mwito wa zana : 10.0 Maarifa ya jumla : 0.0
#321#321	GPT-5.4 Nanonone	4.6	OpenAI	$0.068	4.42s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 4 Tokeni za ingizo 246,687 Tokeni za matokeo 14,894 Tokeni za hoja 0 Muda wa majibu (wastani) 4.42s Muda wa majibu (jumla) 101.75s Muda wa majibu (upeo) 45.38s Jibu lisilo sahihi: 16 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 4.6 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 3.8 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#320#320	DeepSeek V3.2none	4.6	DeepSeek	$0.119 ↑	22.44s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 17 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 34.8% Majaribio yasiyo thabiti 5 Tokeni za ingizo 342,158 Tokeni za matokeo 57,866 Tokeni za hoja 0 Muda wa majibu (wastani) 22.44s Muda wa majibu (jumla) 516.03s Muda wa majibu (upeo) 122.50s Jibu lisilo sahihi: 9 Hitilafu ya API: 3 Muundo wa ziada: 2 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.2 Uandishi wa msimbo : 3.1 Mchanganyiko : 4.8 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.7 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#319#319	Qwen3 Coder Nextmedium	4.7	Qwen	$0.071 ↑	16.97s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 24.6% Majaribio yasiyo thabiti 4 Tokeni za ingizo 311,647 Tokeni za matokeo 40,395 Tokeni za hoja 0 Muda wa majibu (wastani) 16.97s Muda wa majibu (jumla) 305.55s Muda wa majibu (upeo) 151.35s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 3 Hakuna jibu: 1 Muda umeisha: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 3.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 3.6 Akili ya jumla : 6.3 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 3.0 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#318#318	Granite 4.2 8Bhigh	4.7	IBM Granite	$0.111	235.35s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 8.2 Kiwango cha kupita kwa kila jaribio 37.7% Majaribio yasiyo thabiti 10 Tokeni za ingizo 282,658 Tokeni za matokeo 198,563 Tokeni za hoja 462,804 Muda wa majibu (wastani) 235.35s Muda wa majibu (jumla) 5413.09s Muda wa majibu (upeo) 685.87s Muda umeisha: 10 Jibu lisilo sahihi: 7 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 3.8 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 3.8 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 6.4 Utatuzi wa mafumbo : 2.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#317#317	Laguna S 2.1none	4.7	Poolside	$0.044 ↓	17.65s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 21 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 14.5% Majaribio yasiyo thabiti 3 Tokeni za ingizo 287,445 Tokeni za matokeo 99,097 Tokeni za hoja 0 Muda wa majibu (wastani) 17.65s Muda wa majibu (jumla) 406.05s Muda wa majibu (upeo) 200.52s Jibu lisilo sahihi: 18 Hakufuata maelekezo: 2 Hakuna jibu: 1 Kazi za mawakala : 5.4 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.4 Mchanganyiko : 2.9 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.0 Ufuataji wa maagizo : 4.3 Utatuzi wa mafumbo : 3.1 Mwito wa zana : 4.7 Maarifa ya jumla : 3.0
#316#316	North Mini Codenone	4.7	Cohere	$0.000	29.47s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 8.9 Kiwango cha kupita kwa kila jaribio 17.4% Majaribio yasiyo thabiti 0 Tokeni za ingizo 177,989 Tokeni za matokeo 26,954 Tokeni za hoja 0 Muda wa majibu (wastani) 29.47s Muda wa majibu (jumla) 677.70s Muda wa majibu (upeo) 159.85s Jibu lisilo sahihi: 13 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 3.0 Mbinu za kupinga AI : 3.0 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.2 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 3.9 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.5 Mwito wa zana : 9.5 Maarifa ya jumla : 3.0
#315#315	Nemotron 3.5 Lightningmedium	4.7	NVIDIA	$0.137 ↕	81.93s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 47.8% Majaribio yasiyo thabiti 12 Tokeni za ingizo 195,780 Tokeni za matokeo 167,746 Tokeni za hoja 598,384 Muda wa majibu (wastani) 81.93s Muda wa majibu (jumla) 1884.31s Muda wa majibu (upeo) 437.11s Jibu lisilo sahihi: 13 Hakufuata maelekezo: 3 Mwito wa zana si sahihi: 1 Muda umeisha: 1 Kazi za mawakala : 2.8 Mbinu za kupinga AI : 6.9 Uandishi wa msimbo : 4.4 Mchanganyiko : 6.2 Uchanganuzi na uchimbaji wa data : 3.7 Mahususi kwa domeni : 2.9 Akili ya jumla : 5.5 Ufuataji wa maagizo : 8.5 Utatuzi wa mafumbo : 4.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#314#314	Mercury 2.5 Previewnone	4.7	Inception	$0.023 ↑	7.05s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.9 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 5 Tokeni za ingizo 250,541 Tokeni za matokeo 86,367 Tokeni za hoja 0 Muda wa majibu (wastani) 7.05s Muda wa majibu (jumla) 162.25s Muda wa majibu (upeo) 84.96s Jibu lisilo sahihi: 16 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.8 Uandishi wa msimbo : 4.7 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.3 Mahususi kwa domeni : 3.6 Akili ya jumla : 5.0 Ufuataji wa maagizo : 6.3 Utatuzi wa mafumbo : 5.6 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#313#313	GLM 4.7 Flashnone	4.8	Z.ai	$0.027	13.04s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 29.0% Majaribio yasiyo thabiti 3 Tokeni za ingizo 255,363 Tokeni za matokeo 27,395 Tokeni za hoja 0 Muda wa majibu (wastani) 13.04s Muda wa majibu (jumla) 221.61s Muda wa majibu (upeo) 97.15s Jibu lisilo sahihi: 15 Mwito wa zana si sahihi: 2 Hakufuata maelekezo: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 5.2 Uandishi wa msimbo : 4.3 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 7.3 Mahususi kwa domeni : 5.3 Akili ya jumla : 4.0 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 6.4 Mwito wa zana : 2.8 Maarifa ya jumla : 3.0
#312#312	Hy3 previewhigh	4.8	Tencent	$0.135 ↕	56.57s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 10 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 2 Tokeni za ingizo 25,987 Tokeni za matokeo 216,719 Tokeni za hoja 0 Muda wa majibu (wastani) 56.57s Muda wa majibu (jumla) 848.59s Muda wa majibu (upeo) 149.94s Hitilafu ya API: 7 Jibu lisilo sahihi: 3 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 6.4 Uandishi wa msimbo : 5.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 5.3 Akili ya jumla : 3.0 Ufuataji wa maagizo : 10.0 Utatuzi wa mafumbo : 7.7 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#311#311	Mimo V2 Omnimedium	4.9	Xiaomi	$0.683 ↓	41.16s
Tazama kadi ya modeli Jumla ya majaribio 21 Majaribio yenye makosa 11 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 50.7% Majaribio yasiyo thabiti 3 Tokeni za ingizo 37,007 Tokeni za matokeo 1,952 Tokeni za hoja 357,306 Muda wa majibu (wastani) 41.16s Muda wa majibu (jumla) 823.26s Muda wa majibu (upeo) 299.23s Jibu lisilo sahihi: 5 Hakufuata maelekezo: 2 Hakuna jibu: 2 Hitilafu ya API: 1 Muundo wa ziada: 1 Kazi za mawakala : 0.0 Mbinu za kupinga AI : 10.0 Uandishi wa msimbo : 3.3 Mchanganyiko : 5.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 5.4 Ufuataji wa maagizo : 8.3 Utatuzi wa mafumbo : 5.9 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#310#310	Hy4 previewnone	4.9	Tencent	$0.165	40.38s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 20 Uaminifu 6.2 Kiwango cha kupita kwa kila jaribio 15.9% Majaribio yasiyo thabiti 1 Tokeni za ingizo 185,167 Tokeni za matokeo 9,430 Tokeni za hoja 0 Muda wa majibu (wastani) 40.38s Muda wa majibu (jumla) 928.76s Muda wa majibu (upeo) 95.32s Jibu lisilo sahihi: 14 Hitilafu ya API: 2 Hakufuata maelekezo: 2 Muundo wa ziada: 1 Mwito wa zana si sahihi: 1 Kazi za mawakala : 5.0 Mbinu za kupinga AI : 3.3 Uandishi wa msimbo : 3.8 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 8.7 Mahususi kwa domeni : 6.8 Akili ya jumla : 5.1 Ufuataji wa maagizo : 7.0 Utatuzi wa mafumbo : 4.6 Mwito wa zana : 3.0 Maarifa ya jumla : 3.0
#309#309	Qwen3.5-9Bnone	4.9	Qwen	$0.041	37.19s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 19 Uaminifu 9.8 Kiwango cha kupita kwa kila jaribio 18.8% Majaribio yasiyo thabiti 1 Tokeni za ingizo 307,670 Tokeni za matokeo 70,427 Tokeni za hoja 0 Muda wa majibu (wastani) 37.19s Muda wa majibu (jumla) 855.27s Muda wa majibu (upeo) 433.02s Jibu lisilo sahihi: 15 Hakufuata maelekezo: 2 Mwito wa zana si sahihi: 2 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.1 Uandishi wa msimbo : 3.9 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 10.0 Mahususi kwa domeni : 3.0 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 3.2 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0
#308#308	MiMo-V2.5none	4.9	Xiaomi	$0.049 ↓	9.88s
Tazama kadi ya modeli Jumla ya majaribio 23 Majaribio yenye makosa 18 Uaminifu 10.0 Kiwango cha kupita kwa kila jaribio 26.1% Majaribio yasiyo thabiti 2 Tokeni za ingizo 276,608 Tokeni za matokeo 33,960 Tokeni za hoja 0 Muda wa majibu (wastani) 9.88s Muda wa majibu (jumla) 227.24s Muda wa majibu (upeo) 124.23s Jibu lisilo sahihi: 14 Muundo wa ziada: 1 Hakufuata maelekezo: 1 Mwito wa zana si sahihi: 1 Hakuna jibu: 1 Kazi za mawakala : 3.9 Mbinu za kupinga AI : 3.5 Uandishi wa msimbo : 5.5 Mchanganyiko : 3.0 Uchanganuzi na uchimbaji wa data : 6.5 Mahususi kwa domeni : 2.9 Akili ya jumla : 4.4 Ufuataji wa maagizo : 6.5 Utatuzi wa mafumbo : 5.4 Mwito wa zana : 10.0 Maarifa ya jumla : 3.0

Mienendo ya jumla ya benchmark

Ona jinsi modeli za sasa zinavyosawazisha alama, gharama, kasi, urefu wa matokeo na uwezo kwa kila kategoria.

Chati →

Mpaka wa Pareto: akili dhidi ya gharama

Maendeleo ya alama bora za kampuni zinazoongoza

Mpaka wa Pareto: akili dhidi ya kasi ya majibu

Mpaka wa Pareto: alama dhidi ya tokeni za matokeo

Ugumu wa kategoria katika modeli zote

Ulinganisho wa haraka

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow