AI BENCHY
Advertise here
#2

Gemini 3.1 Pro Preview

Google Toleo: 2026-02-19 Imepimwa tarehe: 2026-04-11 01:44 google/gemini-3.1-pro-preview::medium
~1.2T jumla (~20B vinavyotumika)MoEImefungwaMakadirio

Muhtasari

Gemini 3.1 Pro Preview hupata alama 9.6 kwenye AI BENCHY na iko nafasi ya #2. Ina reliability Haipo, pass rate 94.4%, gharama jumla $0.578, na wastani wa response time 15.96s.

Kinachofanya Gemini 3.1 Pro Preview iwe ya kipekee: Inaonekana zaidi kwenye Mahususi kwa domeni, ambako iko #2; huku Mchanganyiko ikiwa eneo lake dhaifu zaidi kwenye #10. Ni mojawapo ya modeli zilizo juu zaidi kwa ujumla.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~1.2T jumla (~20B vinavyotumika)
Muundo
MoE
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Alama

9.6

Uthabiti

10.0

Uaminifu

Haipo

Jumla ya tokeni za matokeo

42,474

Jumla ya tokeni za ingizo

0

Bei ya ingizo

$2.000 / 1M

Bei ya toleo

$12.000 / 1M

Majaribio sahihi

Majaribio yenye makosa: 1

Kiwango cha kupita kwa kila jaribio: 94.4%

Majaribio yasiyo thabiti

0

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

15.96s

Muda wa majibu (upeo): 40.61s

Muda wa majibu (jumla): 175.52s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#2 Gemini 3.1 Pro Preview

medium
Gharama
$0.115
Muda
87.2s
Tokeni
9,629 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 02:51 Jaribio tena 9.2 10.0 $1.352 Linganisha
2026-07-16 23:01 Jaribio jipya limeongezwa 9.2 10.0 $1.361 Linganisha
2026-06-04 14:04 Jaribio jipya limeongezwa 9.4 10.0 $1.054 Linganisha
2026-05-22 00:30 Suite imebadilika 9.3 10.0 $1.006 Linganisha
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 9.6 Haipo $0.578 Uendeshaji wa sasa

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-04-11 01:44 · Jaribio la kwanza lililorekodiwamarudio 54/549.610.0Haipo17/18042,4740$0.57815.96s
2026-07-16 23:01 · Jaribio jipya limeongezwamarudio 66/669.210.010.020/22097,95892,287$1.36121.47s
Tofauti+0.30.0-30-55484-92287-$0.783-5516ms

Ufunikaji wa benchmark unatofautiana: marudio 54/54 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 66/66 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 10.0 10.0
Uandishi wa msimbo 10.0 10.0
Mchanganyiko 9.5 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 7.7 10.0
Akili ya jumla 10.0 10.0
Ufuataji wa maagizo 10.0 10.0
Utatuzi wa mafumbo 10.0 10.0
Mwito wa zana 10.0 10.0

Modeli zilizolinganishwa