Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Google: Gemini 2.5 Flash

Samenvatting

Benchmarkvergelijking Claude Sonnet 5 vs Gemini 2.5 Flash: Gemini 2.5 Flash leidt in gemiddelde score met 6.2 vs 5.7. Gemini 2.5 Flash heeft lagere benchmarkkosten met $0.016 vs $0.287. Gemini 2.5 Flash is sneller met 875ms vs 4.74s, met slagingspercentages van 42.9% vs 46.0%.

Aanbevolen model: Gemini 2.5 Flash - Het heeft hier de beste score (6.2) en kost ongeveer 18.9x minder dan Claude Sonnet 5.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-06-30

Metriek Claude Sonnet 5 Claude Sonnet 5 none Releasedatum: 2026-06-30 Gemini 2.5 Flash Gemini 2.5 Flash none Releasedatum: 2025-06-17
Score 5.7 6.2
Rang #117 #95
Betrouwbaarheid 10.0 10.0
Consistentie 8.6 9.6
Correcte tests
Slaagpercentage per poging 42.9% 46.0%
Instabiele tests 4 1
Totaal runs 63 63
Kosten per resultaat 4.098 0.169
Totale kosten $0.287 $0.016
Invoerprijs $2.000 / 1M $0.300 / 1M
Uitvoerprijs $10.000 / 1M $2.500 / 1M
Totaal aantal invoer-tokens 76,797 35,926
Uitvoer-tokens 13,325 1,770
Redeneer-tokens 0 0
Responstijd (gem.) 4.74s 875ms
Responstijd (max) 29.46s 4.39s
Responstijd (totaal) 99.46s 18.37s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#117 Claude Sonnet 5

none
Kosten
$0.061
Tijd
53.7s
Tokens
6,172 tok

#95 Gemini 2.5 Flash

none
Ongeldige SVG
Kosten
$0.164
Tijd
215.5s
Tokens
65,659 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Anti-AI-trucs Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 5.3 10.0 25.0% 0 3.60s 834 1,813 0
Gemini 2.5 Flash 3.0 10.0 0.0% 0 582ms 492 102 0
Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 4.6 7.9 22.2% 1 3.67s 10,590 1,864 0
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
Gecombineerd Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 3.0 10.0 0.0% 0 29.46s 38,775 6,340 0
Gemini 2.5 Flash 3.0 10.0 0.0% 0 4.39s 12,519 366 0
Gegevensparsering en extractie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 10.0 10.0 100.0% 0 3.01s 10,503 309 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 652ms 7,257 279 0
Domeinspecifiek Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 5.3 7.2 44.4% 1 3.28s 975 933 0
Gemini 2.5 Flash 5.9 7.2 55.6% 1 495ms 633 12 0
Algemene intelligentie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 4.7 3.1 33.3% 1 2.81s 708 272 0
Gemini 2.5 Flash 5.0 10.0 0.0% 0 615ms 486 78 0
Instructies opvolgen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 6.4 10.0 50.0% 0 2.58s 909 103 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 590ms 615 72 0
Puzzeloplossing Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 6.0 7.4 55.6% 1 3.22s 894 778 0
Gemini 2.5 Flash 7.7 10.0 66.7% 0 604ms 558 132 0
Toolaanroepen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 10.0 10.0 100.0% 0 6.80s 12,351 522 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 1.91s 5,088 234 0
Algemene kennis Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 3.0 10.0 0.0% 0 4.31s 258 391 0
Gemini 2.5 Flash 3.0 10.0 0.0% 0 1.15s 156 12 0

Snelle vergelijking

Vergelijkingspaar wisselen