ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite Preview vs StepFun: Step 3.5 Flash

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-03

指標 Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview none リリース: 2026-03-03 Step 3.5 Flash Step 3.5 Flash medium リリース: 2026-02-01
スコア 7.5 7.4
順位 #49 #55
信頼性 10.0 10.0
一貫性 9.7 9.4
正解テスト
試行ごとの合格率 63.3% 59.7%
不安定なテスト 1 1
総実行回数 60 57
結果あたりのコスト 0.142 0.133
合計コスト $0.017 $0.062
入力価格 $0.250 / 1M $0.090 / 1M
出力価格 $1.500 / 1M $0.300 / 1M
合計入力トークン 34,579 33,555
出力トークン 5,541 90,478
推論トークン 0 173,544
応答時間(平均) 1.23s 43.20s
応答時間(最大) 3.39s 170.45s
応答時間(合計) 24.68s 561.54s

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 7.5 8.4 66.7% 1 1.04s 504 1,092 0
Step 3.5 Flash 10.0 10.0 100.0% 0 40.57s 694 20,391 24,176
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 6.8 10.0 50.0% 0 1.06s 5,125 664 0
Step 3.5 Flash 3.5 7.8 0.0% 0 62.83s 1,335 12,098 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 3.0 10.0 0.0% 0 3.20s 13,026 339 0
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 13,638 1,176 12,984
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 10.0 10.0 100.0% 0 1.22s 7,550 399 0
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 7,368 600 13,886
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 5.3 10.0 33.3% 0 942ms 641 568 0
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 673 45,350 90,436
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 4.0 10.0 0.0% 0 741ms 488 69 0
Step 3.5 Flash 5.5 10.0 0.0% 0 22.39s 509 240 3,506
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 10.0 10.0 100.0% 0 1.13s 623 574 0
Step 3.5 Flash 8.3 10.0 50.0% 0 4.78s 705 2,364 3,521
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 10.0 10.0 100.0% 0 900ms 570 1,045 0
Step 3.5 Flash 5.3 10.0 33.3% 0 7.22s 711 5,630 10,861
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 10.0 10.0 100.0% 0 3.39s 5,894 782 0
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 7,701 275 3,802
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 3.1 Flash Lite Preview 3.0 10.0 0.0% 0 814ms 158 9 0
Step 3.5 Flash 3.0 10.0 0.0% 0 108.45s 221 2,354 10,372

クイック比較

比較ペアを切り替え