AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs Nemotron 3 Ultra 550b A55b

概要

Gemini 3.1 Flash Lite vs Nemotron 3 Ultra 550b A55b の benchmark 比較: Nemotron 3 Ultra 550b A55b が平均スコアでリードし、8.1 vs 6.5 です。 Nemotron 3 Ultra 550b A55b の benchmark コストが低く、$0.158 vs $2.044 です。 Nemotron 3 Ultra 550b A55b の方が高速で、15.05s vs 61.96s です、成功率は 58.7% vs 69.8% です。

おすすめモデル: Nemotron 3 Ultra 550b A55b - ここでは最高スコア（8.1）で、Gemini 3.1 Flash Lite より約 12.9 倍低コストです。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-18

指標	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite high リリース: 2026-05-08	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium リリース: 2026-06-04 無料で利用可能

指標	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite high リリース: 2026-05-08	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium リリース: 2026-06-04 無料で利用可能
スコア	6.5	8.1
順位	#83	#26
信頼性	10.0	9.7
一貫性	6.8	8.8
正解テスト
試行ごとの合格率	58.7%	69.8%
不安定なテスト	4	3
総実行回数	54	63
結果あたりのコスト	20.437	0.000
合計コスト	$2.044	$0.158
入力価格	$0.250 / 1M	$0.500 / 1M
出力価格	$1.500 / 1M	$2.200 / 1M
合計入力トークン	29,134	46,813
出力トークン	1,984	18,002
推論トークン	1,355,583	53,091
応答時間（平均）	61.96s	15.05s
応答時間（最大）	149.23s	43.93s
応答時間（合計）	1115.31s	316.09s

生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#83 Gemini 3.1 Flash Lite

high

無効なSVG

コスト: $0.000
時間: 15.5s
トークン: 0 tok

#26 Nemotron 3 Ultra 550b A55b

medium

無効なSVG

コスト: $0.000
時間: 300.0s
トークン: 0 tok

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	8.7	9.5	75.0%	0		37.16s	459	100	130,598
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		8.62s	780	835	1,485

コーディング	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	3.3	3.3	33.3%	0		137.63s	762	666	188,733
Nemotron 3 Ultra 550b A55b	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725

複合	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		149.23s	12,873	327	198,243
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		43.93s	17,574	1,040	3,590

データ解析と抽出	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		4.49s	7,360	279	7,351
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285

ドメイン特化	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	3.6	7.2	22.2%	1		139.90s	645	18	566,210
Nemotron 3 Ultra 550b A55b	3.5	4.4	33.3%	2		24.90s	858	11,169	16,249

汎用知能	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	5.0	2.1	66.7%	1		45.69s	488	95	64,644
Nemotron 3 Ultra 550b A55b	3.7	9.5	0.0%	0		2.52s	360	70	235

指示追従	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	7.3	5.8	83.3%	1		23.26s	528	52	3,549
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		6.35s	765	182	1,243

パズル解決	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	5.7	6.8	44.4%	1		50.83s	562	213	193,654
Nemotron 3 Ultra 550b A55b	5.5	9.9	33.3%	0		3.54s	792	771	2,055

ツール呼び出し	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		6.44s	5,457	234	2,601
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		7.72s	9,781	304	984

雑学	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.1 Flash Lite	0.0	0.0	0.0%	0		0ms	0	0	0
Nemotron 3 Ultra 550b A55b	3.0	10.0	0.0%	0		38.47s	228	304	8,240

クイック比較

比較ペアを切り替え