Google
Toleo: 2026-11-12
Imepimwa tarehe: 2026-11-12 23:19
google/gemini-decision-1::none
-NyingineImefungwa Muhtasari
Gemini Decision 1 hupata alama 2.9 kwenye AI BENCHY na iko nafasi ya #475. Ina reliability 9.2, pass rate 23.2%, gharama jumla $0.006, na wastani wa response time 652ms.
Kinachofanya Gemini Decision 1 iwe ya kipekee: Inaonekana zaidi kwenye Uchanganuzi na uchimbaji wa data, ambako iko #1; huku Utatuzi wa mafumbo ikiwa eneo lake dhaifu zaidi kwenye #10.
Taarifa za modeli
Ilifanyiwa utafiti tarehe 2026-11-12
- Vigezo
- -
- Muundo
- Nyingine
- Upatikanaji
- Imefungwa
- Leseni
- -
2.9
Uthabiti
4.9
9.2
Jumla ya tokeni za matokeo
0
Jumla ya tokeni za ingizo
50,079
Bei ya ingizo
$0.100 / 1M
Bei ya toleo
$0.000 / 1M
Bei ya kusoma akiba
Haipo
Bei ya kuandika akiba
Haipo
Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.
Majaribio yenye makosa: 7
Kiwango cha kupita kwa kila jaribio: 23.2%
Ufunikaji wa benchmark: marudio 36/69. Adapta hutoa chaguo. Inasaidia majaribio 12/23. Majaribio mengine hayatumiki, hayajahesabiwa kama kushindwa. Alama hutumia kundi lote la majaribio.
Majaribio yasiyo thabiti
1
Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).
Chati
Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.
Alama vs Jumla ya gharama
Muda wa majibu (wastani)
Alama vs Muda wa majibu (wastani)
Jumla ya tokeni za matokeo
Alama vs Jumla ya tokeni za matokeo
Ulinganisho wa haraka
Gemini Decision 1defaultvsCommand A+lowGemini Decision 1defaultvsSpan-02defaultGemini Decision 1defaultvsCommand A+noneGemini Decision 1defaultvsd1-ultradefaultGemini Decision 1defaultvsCommand A+highGemini Decision 1defaultvsJev 1.13defaultGemini Decision 1defaultvsXing4.0 29b A4bnoneInapatikana bureGemini Decision 1defaultvsDecider V1.2defaultGemini Decision 1defaultvsCommand A+mediumGemini Decision 1defaultvsReflexdefault
Mgawanyo wa kategoria
| Kategoria | Alama | Uthabiti | Majaribio sahihi |
|---|---|---|---|
| Kazi za mawakala | 0.0 | 0.0 | |
| Mbinu za kupinga AI | 4.0 | 7.5 | |
| Uandishi wa msimbo | 4.5 | 6.7 | |
| Mchanganyiko | 0.0 | 0.0 | |
| Uchanganuzi na uchimbaji wa data | 10.0 | 10.0 | |
| Mahususi kwa domeni | 5.3 | 10.0 | |
| Akili ya jumla | 0.0 | 0.0 | |
| Ufuataji wa maagizo | 1.5 | 5.0 | |
| Utatuzi wa mafumbo | 1.6 | 1.0 | |
| Mwito wa zana | 0.0 | 0.0 | |
| Maarifa ya jumla | 0.0 | 0.0 |