ナビゲーション
Advertise here

Mercury 2.5 Preview (high) vs Step 3.7 Flash (high)

Step 3.7 Flash (high) が平均スコアでリードし、6.6 vs 6.5 です。 Mercury 2.5 Preview (high) の benchmark コストが低く、$0.040 vs $1.478 です。 Mercury 2.5 Preview (high) の方が高速で、7.61s vs 72.72s です、成功率は 65.2% vs 58.0% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-10-12

比較対象モデル

順位
#207
合計出力トークン
180,597
応答時間(平均)
7.61s
合計コスト
$0.040
順位
#203
合計出力トークン
1,100,052
応答時間(平均)
72.72s
合計コスト
$1.478
おすすめモデル Mercury 2.5 Preview (high)

スコアはここでの最高値に近く(6.5 vs 6.6)、Step 3.7 Flash (high) より約 37.9 倍低コストです。

詳細比較

指標 Mercury 2.5 Preview Mercury 2.5 Preview high リリース: 2026-09-02 Step 3.7 Flash Step 3.7 Flash high リリース: 2026-05-29
スコア 6.5 6.6
順位 #207 #203
信頼性 9.9 10.0
一貫性 8.0 8.5
試行回数 69/69 69/69
正解テスト
試行ごとの合格率 65.2% 58.0%
不安定なテスト 6 4
総実行回数 69 69
結果あたりのコスト 0.319 12.267
合計コスト $0.040 $1.478
入力価格 $0.040 / 1M $0.200 / 1M
出力価格 $0.150 / 1M $1.150 / 1M
キャッシュ読み取り料金 該当なし $0.040 / 1M
キャッシュ書き込み料金 該当なし 該当なし
合計入力トークン 298,512 421,200
出力トークン 3,178 1,100,052
推論トークン 177,419 0
応答時間(平均) 7.61s 72.72s
応答時間(最大) 86.84s 364.99s
応答時間(合計) 175.08s 1672.53s
パラメータ ~100B 198B 総数 (11B アクティブ)
公開状況 クローズド オープンソース

キャッシュ料金は入力トークンに適用されます。読み取りは保存済みのプロンプトを再利用し、書き込みは保存するため追加料金がかかる場合があります。出力トークンには出力料金が適用されます。

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#207 Mercury 2.5 Preview

high
コスト
$0.001
時間
4.5s
トークン
3,851 tok

#203 Step 3.7 Flash

high
コスト
$0.007
時間
63.6s
トークン
6,030 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

比較ペアを切り替え