#15 Gemma 4 31B
medium- Kosten
- $0.002
- Tijd
- 45.7s
- Tokens
- 2,696 tok
Samenvatting
Gemma 4 31B scoort 8.3 op AI BENCHY en staat op #15. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 79.6%, $0.018 totale kosten en 24.88s gemiddelde responstijd.
Wat Gemma 4 31B uniek maakt: Het valt het meest op in Domeinspecifiek, waar het #2 staat, terwijl Programmeren het zwakste gebied is met #18. De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau.
Onderzocht op 2026-08-12
8.3
Consistentie
9.2
n.v.t.
Totaal aantal uitvoer-tokens
40,684
Totaal aantal invoer-tokens
0
Invoerprijs
$0.130 / 1M
Uitvoerprijs
$0.380 / 1M
Instabiele tests
2
Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Rungeschiedenis
| Getest op | Score | Betrouwbaarheid | Correcte tests | Totale kosten | Vergelijken |
|---|---|---|---|---|---|
| 2026-08-14 02:55 Hertest | 6.2 | 10.0 | $0.101 ↓ | Vergelijken | |
| 2026-07-16 23:24 Nieuwe test toegevoegd | 6.3 | 10.0 | $0.163 ↑ | Vergelijken | |
| 2026-06-04 14:27 Nieuwe test toegevoegd | 7.9 | 8.9 | $0.035 ↓ | Vergelijken | |
| 2026-05-22 00:35 Suite gewijzigd | 8.0 | 6.7 | $0.029 | Vergelijken | |
| 2026-04-14 00:56 Eerste geregistreerde run | 8.3 | n.v.t. | $0.018 | Huidige run |
Runvergelijking
| Run | Benchmarkdekking | Score | Consistentie | Betrouwbaarheid | Correcte tests | Instabiele tests | Totaal aantal uitvoer-tokens | Totaal aantal invoer-tokens | Totale kosten | Responstijd (gem.) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-14 00:56 · Eerste geregistreerde run | 54/54 pogingen | 8.3 | 9.2 | n.v.t. | 13/18 | 2 | 40,684 | 0 | $0.018 | 24.88s |
| 2026-05-22 00:35 · Suite gewijzigd | 60/60 pogingen | 8.0 | 9.2 | 6.7 | 14/20 | 2 | 69,291 | 0 | $0.029 | 35.51s |
| Verschil | — | +0.4 | 0.0 | -1 | 0 | -28607 | 0 | -$0.012 | -10626ms |
De benchmarkdekking verschilt: 54/54 pogingen (Doel: 3 herhalingen per test) tegenover 60/60 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.
Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.
Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.
| Categorie | Score | Consistentie | Correcte tests |
|---|---|---|---|
| Anti-AI-trucs | 10.0 | 10.0 | |
| Programmeren | 4.7 | 1.6 | |
| Gecombineerd | 3.0 | 10.0 | |
| Gegevensparsering en extractie | 10.0 | 10.0 | |
| Domeinspecifiek | 7.7 | 10.0 | |
| Algemene intelligentie | 10.0 | 10.0 | |
| Instructies opvolgen | 10.0 | 10.0 | |
| Puzzeloplossing | 8.8 | 7.9 | |
| Toolaanroepen | 3.0 | 10.0 |