ナビゲーション
Advertise here

Mercury 2.5 (high) vs Step 3.7 Flash (high)

Step 3.7 Flash (high) が平均スコアでリードし、6.6 vs 6.5 です。 Mercury 2.5 (high) の benchmark コストが低く、$0.044 vs $1.478 です。 Mercury 2.5 (high) の方が高速で、7.62s vs 72.72s です、成功率は 59.4% vs 58.0% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-10-12

比較対象モデル

順位
#208
合計出力トークン
193,676
応答時間(平均)
7.62s
合計コスト
$0.044
順位
#203
合計出力トークン
1,100,052
応答時間(平均)
72.72s
合計コスト
$1.478
おすすめモデル Mercury 2.5 (high)

スコアはここでの最高値に近く(6.5 vs 6.6)、Step 3.7 Flash (high) より約 34.1 倍低コストです。

詳細比較

指標 Mercury 2.5 Mercury 2.5 high リリース: 2026-09-08 Step 3.7 Flash Step 3.7 Flash high リリース: 2026-05-29
スコア 6.5 6.6
順位 #208 #203
信頼性 9.8 10.0
一貫性 8.7 8.5
試行回数 69/69 69/69
正解テスト
試行ごとの合格率 59.4% 58.0%
不安定なテスト 4 4
総実行回数 69 69
結果あたりのコスト 0.362 12.267
合計コスト $0.044 $1.478
入力価格 $0.040 / 1M $0.200 / 1M
出力価格 $0.150 / 1M $1.150 / 1M
キャッシュ読み取り料金 $0.004 / 1M $0.040 / 1M
キャッシュ書き込み料金 該当なし 該当なし
合計入力トークン 358,562 421,200
出力トークン 4,266 1,100,052
推論トークン 189,410 0
応答時間(平均) 7.62s 72.72s
応答時間(最大) 80.30s 364.99s
応答時間(合計) 175.36s 1672.53s
パラメータ ~100B 198B 総数 (11B アクティブ)
公開状況 クローズド オープンソース

キャッシュ料金は入力トークンに適用されます。読み取りは保存済みのプロンプトを再利用し、書き込みは保存するため追加料金がかかる場合があります。出力トークンには出力料金が適用されます。

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#208 Mercury 2.5

high
コスト
$0.001
時間
3.5s
トークン
2,447 tok

#203 Step 3.7 Flash

high
コスト
$0.007
時間
63.6s
トークン
6,030 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

比較ペアを切り替え