ナビゲーション
Advertise here

Mercury 2.5 Preview (medium) vs GPT-6 Sol

平均スコアは 6.8 vs 6.8 でほぼ同等です。 Mercury 2.5 Preview (medium) の benchmark コストが低く、$0.037 vs $0.551 です。 Mercury 2.5 Preview (medium) の方が高速で、6.66s vs 9.02s です、成功率は 66.7% vs 63.8% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-10-01

比較対象モデル

順位
#171
合計出力トークン
150,107
応答時間(平均)
6.66s
合計コスト
$0.037
順位
#172
合計出力トークン
7,989
応答時間(平均)
9.02s
合計コスト
$0.551
おすすめモデル Mercury 2.5 Preview (medium)

ここでは最高スコア(6.8)で、GPT-6 Sol より約 15.0 倍低コストです。

詳細比較

指標 Mercury 2.5 Preview Mercury 2.5 Preview medium リリース: 2026-09-02 GPT-6 Sol GPT-6 Sol none リリース: 2026-09-23
スコア 6.8 6.8
順位 #171 #172
信頼性 10.0 10.0
一貫性 9.6 8.5
試行回数 69/69 69/69
正解テスト
試行ごとの合格率 66.7% 63.8%
不安定なテスト 1 4
総実行回数 69 69
結果あたりのコスト 0.244 4.232
合計コスト $0.037 $0.551
入力価格 $0.000 / 1M $2.000 / 1M
出力価格 $0.000 / 1M $10.000 / 1M
合計入力トークン 397,291 235,086
出力トークン 6,355 7,989
推論トークン 143,752 0
応答時間(平均) 6.66s 9.02s
応答時間(最大) 74.63s 57.02s
応答時間(合計) 153.29s 207.45s
パラメータ ~100B ~2T 総数 (~150B アクティブ)
公開状況 クローズド クローズド

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#171 Mercury 2.5 Preview

medium
コスト
$0.001
時間
2.7s
トークン
2,241 tok

#172 GPT-6 Sol

none
コスト
$0.030
時間
31.9s
トークン
3,055 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
GPT-6 Sol 5.5 10.0 33.3% 0 12.23s 7,302 389 0

クイック比較

比較ペアを切り替え