Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 3.5 Flash vs IBM: Granite 4.1 8B

Résumé

Comparaison benchmark Gemini 3.5 Flash vs Granite 4.1 8B : Gemini 3.5 Flash mène au score moyen avec 9.8 vs 4.0. Granite 4.1 8B a le coût de benchmark le plus bas avec $0.003 vs $1.115. Granite 4.1 8B est plus rapide avec 728ms vs 8.84s, avec des taux de réussite de 96.8% vs 9.5%.

Modèle recommandé: Granite 4.1 8B - Il offre le meilleur compromis global: score compétitif (4.0), coût inférieur à Gemini 3.5 Flash et temps de réponse équilibré.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-12

Métrique Gemini 3.5 Flash Gemini 3.5 Flash high Sortie: 2026-05-19 Granite 4.1 8B Granite 4.1 8B none Sortie: 2026-05-01
Score 9.8 4.0
Rang #1 #163
Fiabilité 10.0 10.0
Cohérence 9.6 10.0
Tests corrects
Taux de réussite par tentative 96.8% 9.5%
Tests instables 1 0
Exécutions totales 63 63
Coût par résultat 5.575 0.131
Coût total $1.115 $0.003
Prix d'entrée $1.500 / 1M $0.050 / 1M
Prix de sortie $9.000 / 1M $0.100 / 1M
Total des jetons d'entrée 37,594 46,285
Jetons de sortie 1,975 2,911
Jetons de raisonnement 115,638 0
Temps de réponse (moy.) 8.84s 728ms
Temps de réponse (max) 34.82s 2.17s
Temps de réponse (total) 185.57s 15.29s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#1 Gemini 3.5 Flash

high
Cost
$0.208
Time
118.2s
Tokens
23,158 tok

#163 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.57s 492 174 4,997
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 645 903 0
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.96s 8,118 456 47,129
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.37s 12,873 351 16,323
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 19,089 396 0
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.43s 7,548 279 8,466
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 7,617 195 0
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 7.6 7.2 77.8% 1 14.09s 633 12 24,721
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 768 24 0
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.63s 486 115 1,650
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 528 115 0
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.35s 615 70 3,799
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 687 66 0
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.23s 558 241 4,940
Granite 4.1 8B 3.2 10.0 0.0% 0 608ms 672 432 0
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 9.8 10.0 100.0% 0 4.96s 6,115 265 1,608
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 7,719 243 0
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.94s 156 12 2,005
Granite 4.1 8B 3.0 10.0 0.0% 0 306ms 216 12 0

Comparaison rapide

Changer la paire de comparaison