Advertise here
#153

Granite 4.1 8B

IBM Granite Releasedatum: 2026-05-01 Getest op: 2026-05-22 00:30 ibm-granite/granite-4.1-8b::none
8BDichtOpen-source

Samenvatting

Granite 4.1 8B scoort 4.1 op AI BENCHY en staat op #153. Het model heeft 10.0 betrouwbaarheid, een slagingspercentage van 10.0%, $0.003 totale kosten en 723ms gemiddelde responstijd.

Wat Granite 4.1 8B uniek maakt: De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het is opvallend snel vergeleken met vergelijkbare modellen.

Modelgegevens

Onderzocht op 2026-08-12

Gerapporteerd
Parameters
8B
Architectuur
Dicht
Beschikbaarheid
Open-source
Licentie
Apache-2.0
Bron voor parameters Bron voor beschikbaarheid

Score

4.1

Consistentie

10.0

Betrouwbaarheid

10.0

Totale kosten (huidige prijs)

$0.003

Totaal aantal uitvoer-tokens

2,742

Totaal aantal invoer-tokens

0

Invoerprijs

$0.050 / 1M

Uitvoerprijs

$0.100 / 1M

Correcte tests

Foute tests: 18

Slaagpercentage per poging: 10.0%

Instabiele tests

0

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

723ms

Responstijd (max): 2.17s

Responstijd (totaal): 14.45s

Verkeerd antwoord: 12 Instructies niet gevolgd: 5 Ongeldige toolaanroep: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#153 IBM: Granite 4.1 8B

none
Kosten
$0.001
Tijd
3.2s
Tokens
491 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 02:51 Hertest 4.0 10.0 $0.007 Vergelijken
2026-07-16 23:04 Nieuwe test toegevoegd 4.0 10.0 $0.007 Vergelijken
2026-06-04 14:07 Nieuwe test toegevoegd 4.0 10.0 $0.003 Vergelijken
2026-05-22 00:30 Suite gewijzigd 4.1 10.0 $0.003 Huidige run
2026-05-01 00:31 Eerste run 4.3 10.0 $0.003 Vergelijken

Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-05-22 00:30 · Suite gewijzigd60/60 pogingen4.110.010.02/2002,7420$0.003723ms
2026-08-14 02:51 · Hertest66/66 pogingen4.010.010.02/2205,996113,836$0.0071.44s
Verschil—+0.10.00.000-3254-113836-$0.004-720ms

De benchmarkdekking verschilt: 60/60 pogingen (Doel: 3 herhalingen per test) tegenover 66/66 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Granite 4.1 8BnonevsLing 3.0 TinynoneGranite 4.1 8BnonevsNemotron 3.5 LightningnoneGratis beschikbaarGranite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsMercury 2.5noneGranite 4.1 8BnonevsGranite 4.2 8BnoneGranite 4.1 8BnonevsLing 3.0 TinyhighGranite 4.1 8BnonevsGLM 4.7 FlashmediumGranite 4.1 8BnonevsLing 3.0 TinylowGranite 4.1 8BnonevsLaguna S 2.1noneGratis beschikbaarGranite 4.1 8BnonevsQwen3.5-9Bmedium

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 4.9 10.0
Programmeren 5.2 10.0
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 3.0 10.0
Domeinspecifiek 3.0 10.0
Algemene intelligentie 4.0 10.0
Instructies opvolgen 3.6 9.9
Puzzeloplossing 3.2 10.0
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen